リファレンスから動画へのAI

リファレンス・トゥ・ビデオAIは、単一の開始フレームではなく、提供したメディア（キャラクターシート、ロケーション、モーションクリップ、オーディオ）によってガイドされたクリップを生成します。モデルはリファレンスが示す内容を維持します。FlickではビデオノードのOmni Referenceアクションとして、Image to Videoや他のビデオアクションの隣にあります。

Image to Videoは1枚の画像をアニメーション化するため、最初のフレームが固定されます。リファレンス・トゥ・ビデオは複数のリファレンスからショットを構築するため、キャラクターは新しいポーズ、新しい場所、新しいカメラアングルで登場しても、シートと同じ見た目を維持できます。正確なフレームが既にある場合はImage to Videoを使用し、素材がある場合はリファレンス・トゥ・ビデオを使用します。

はい。オーディオトラックをリファレンスとして接続し、上記の列車の例のように、モデルにそれを話すよう指示します（「@Audio1の内容を話す」）。オーディオはアップロードした録音でも、同じキャンバス上で生成された対話でも構いません。

MiniMax H3 MaxのOmni ReferenceはFreeプランで1クリップ20クレジットで利用でき、Freeプランでは最大300クレジットと毎週100クレジットが無料で提供され、クレジットカードは不要です。Seedance 2.5とSeedance 2.0にはStandardプランが必要で、有料プランは月額5ドルから始まります。

同じキャラクターシートをすべてのクリップでリファレンスとして使用し、各プロンプトで名前を指定します。Flickのレジデンシー映画製作者はこの方法で映画全体を制作し、キャラクターごとに正面、側面、背面のシートを用意し、すべてのショットに接続しました。静止フレームの場合は、キャラクターリファレンスが同じ役割を果たします。

Seedance 2.0はOmni Referenceで1クリップあたり最大15秒まで生成できます。長いシーンは複数のクリップに分割します：1つのクリップの最後のフレームから続けるか、次のプロンプトで同じリファレンスを再利用し、タイムライン上でカットしてつなぎ合わせます。