Omni Reference:画像・動画・音声を1回の生成に

launch-omni-reference

Omni Referenceを公開しました。Seedance 2.5で動作し、最大50件の参照素材(画像30枚、動画10本、音声10件)から1本の動画を生成できる新機能です。現在利用でき、次はMiniMax H3が同じ画面に追加される予定です。

モデルに、より多くの手がかりを

Omni Referenceは既存ツールの更新ではなく、独立した機能です。多くのAI動画ツールでは参照画像を1枚しか添付できませんが、1枚だけでは30秒の動画を通してキャラクターを安定させるには不十分です。

そこで上限を引き上げました。1回の生成で画像30枚動画10本音声10件まで添付できます。動画参照は1本あたり2〜30秒で、合計上限は30秒です。音声参照も同じ制限です。

重要なのは数ではなく、各参照素材に役割を割り当てることです。どの画像がキャラクターの同一性を担い、どの動画が動きを担い、どのファイルが音を担うのかをプロンプトで指定します。これにより、各アップロードの意図をモデルが推測する必要がなくなります。

画像、動画、または音声のみから作業できます。画像や動画を添付せず、音声参照だけで生成することも可能です。開始フレームと終了フレームの両方を指定できます。

仕様

項目内容
長さ4〜30秒
解像度480Pまたは720P
アスペクト比Auto、3:4、4:3、9:16、16:9、1:1
音声オン/オフ
参照素材の上限50件(画像30枚、動画10本、音声10件)
動画参照の長さ1本2〜30秒、合計30秒
音声参照の長さ1件2〜30秒、合計30秒
利用できる機能Omni Reference

試し方

Omni ReferenceはAIビデオパネルで公開され、すべてのDomoAIアカウントで利用できます。初期状態では選択されていないため、画面を開いて選ぶ必要があります。

新規アカウントには30 Creditsが付与されます。これで動画参照なし、480P・4秒の生成を1回試し、実際の出力を確認できます。

その後のCredits消費は、アップロードする素材、動画の長さ、選択する解像度によって変わります。一律の料金は案内できません。参照素材を設定したうえで、実行前に「Generate」ボタンに表示される正確な数値を確認してください。プランの詳細は料金ページで確認できます。

すでにDomoAIを使っている場合の変更点

現在使っている機能は変わりません。Seedance 2.0は引き続き画像から動画Frames to Video、キャラクターから動画へ、テキストから動画を支えています。置き換える予定はありません。

Omni Referenceはそれらと並ぶ別の選択肢です。実用上の違いは4つあります。

  • 1件ではなく、多数の参照素材。Seedance 2.0を使う機能では、1枚の画像、または開始・終了フレームを使います。Omni Referenceでは3種類のメディアから最大50件を入力し、それぞれに役割を指定できます。
  • 音声が入力素材になります。これまでDomoAIには、音声を生成用の参照素材として受け付ける機能がありませんでした。Omni Referenceでは音だけから動画を作れます。
  • 15秒ではなく30秒。Seedance 2.0の画像から動画は最長15秒です。Omni Referenceではその2倍まで生成できます。
  • 480Pまたは720P。ここはトレードオフです。DomoAIが提供するSeedance 2.0の機能は1080Pまで対応しますが、Omni Referenceは対応しません。解像度と引き換えに、長さと参照素材の制御を得られます。

アップロード前にキャラクターシートを整えるなら、画像編集で元画像を先に修正できます。

すでに公開されている作例

Seedance 2.5はDomoAIへの統合前から他のサービスで利用されていたため、参考にできる作例があります。

Xの@techhallaは、タイムコード付きのショットリスト型プロンプトを使って時間が静止したようなVFX映像を制作しました。この投稿は19.1万回表示されています。(出典

r/Seedance_AIでは、「vlog style ads」のスレッドが109件のアップボートを集め、コメントでは長い動画での動きの一貫性が評価されています。(出典

‍YouTubeのManual de Criacaoは、同じプロンプトをSeedance 2.5と2.0に入力し、30本の動画で比較しました。現時点で最も分かりやすい比較です。(出典

公開直後の自社評価だけを書くより、第三者の検証を紹介するほうが有益だと考えています。Omni Referenceがクリエイターに十分使われ、判断できる材料がそろったら、この記事を更新します。

次はMiniMax H3

Seedance 2.5はこの画面で最初に使えるモデルですが、唯一のモデルではありません。MiniMax H3もOmni Referenceに追加予定で、参照素材と出力には独自の上限が設定されます。

統合範囲が確定するまで、具体的な数値は公開しません。公開後は、長いマルチリファレンス映像か、短くシャープな映像か、ショットに合うモデルをOmni Reference上で選べます。ページを移動したり、参照素材を組み直したりする必要はありません。

よくある質問

Seedance 2.5とDomoAI 2.5は同じですか? いいえ。Seedance 2.5はByteDanceの動画モデルで、DomoAIがAPI経由で統合しています。DomoAI 2.5はDomoAI独自のモデルで、画像から動画でのみ動作します。開発会社もモデル系列も異なります。

DomoAIのどこでSeedance 2.5を使えますか? domoai.app/ja/create/omni-referenceにあるOmni Referenceで使えます。画像から動画、Frames to Video、その他の機能には搭載されておらず、それらでは引き続きSeedance 2.0を使用します。

無料で試せますか? 新規アカウントには30 Creditsが付与され、動画参照なし、480P・4秒の生成を1回試せます。既存アカウントには、このリリースに伴う追加Creditsは付与されません。

最大解像度は? 720Pです。Omni Referenceは480Pまたは720Pでのみ生成できます。

MiniMax H3はいつ追加されますか? 公開日はまだ発表していません。同じ画面に追加する予定で、統合範囲が確定した時点で仕様を案内します。

最新の記事