Luma AI の新機能 Modify Video がリリースされた。
Modeify Video は、動画から動画の生成 (v2v) 機能で、動画内のオブジェクトの動き, カメラワーク, キャラクターなどを損なうことなく、環境やライティング, 質感を再構築できるようになっている。
Luma AI
人をクリーチャーに変えたり、シーンを変更したり、必要な部分を残しながら動画に編集を加えることができるのが特徴だ。
生成される動画は、Luma AI の最新の動画生成AIモデル RAY2 を利用している。
撮影方法を工夫することで、Modify Video 機能を幅広く活用できる。
以下に Luma AI 公式のサンプルを紹介していく;
モーション & パフォーマンスキャプチャ
Luma AI
Luma AI
動画から全身の動き, 顔の表情, リップシンクを抽出し、生成するキャラクターや小道具, カメラの動きなどを完全に同期させて動かすことができる。
リスタイリング, ワールドスワップ
Luma AI
Luma AI
動きや構図を保ったまま、シーンを自在に変換できる。
ガレージを宇宙船に変えたり、昼のシーンを夜に変えたりすることも可能。
VFX & 要素の編集
Luma AI
Luma AI
映像内の 衣装, 顔, 小道具, 空などの個別の要素だけを編集できる。
キャラクターをシーン内で年齢変化させたり、シャツの色を変更したり、空にUFOを追加したりすることも可能だ。
Modify Video 機能は、Luma AI 公式ページの Dream Machine 内にて利用することができる。
生成できる動画の時間は最大10秒、解像度は1080p, 720p の2種類となっている。
興味のある方は、Luma AI が提供する Web版, iOS版 Dream Machine にて試してみよう。
< 2025.7.30追記 >
Modify Video 機能をアレンジした新機能、自然言語を使って動画を編集できる Modify with Instructions がリリースされた。
詳細情報
Luma AI では、画像生成AIモデル Photon や動画生成AIモデル RAY2 など、生成AI関連のサービスをリリースしている。
Luma AI の提供する Dream Machine 内で動画生成や画像生成などの機能を利用することができる。

Luma AI – Dream Machine 公式ページはこちら
Tags : Generative AI Luma AI v2v Video Model
編集記録
3/29 : AIFF作品提出締切り日を4月6日から4月13日に再延長したことを反映










