ブログに戻る
seedance
evolution
tutorial-series
temporal-consistency
flickering

ちらつきから一貫性へ:時間的一貫性の進化

AI動画が最大の敵——フレーム間の不安定性——をいかにして克服したか。光流補正からSeedance 2.0のネイティブ一貫性までの技術的旅

公開日 2026-02-09

ちらつきから一貫性へ:時間的一貫性の進化

時間的一貫性の疫病

「40代のエレガントな女性、シルバーヘア、ネイビーのプロフェッショナルスーツ、企業のロビーを歩き抜ける。」

プロンプトは完璧でした。最初のフレームは鋭く、プロフェッショナル——エグゼクティブコーチングプロモーションに求められるものすべてでした。

しかし、生成をクリックすると:

フレーム1-12:彼女は自信を持って歩き、シルバーヘアが輝いています。 フレーム13-24:シルバーヘアが金色に変わります。 フレーム25-36:金色が茶色に深まり、スーツは質感を失います。 フレーム37-48:彼女は完全に別人のように見えます。

これが「ちらつき」です——2023年のAI動画の時間的一貫性の疫病。衣服のテクスチャが変化し、照明が理由もなく変わり、キャラクターの顔が4秒以内に3つの異なるアイデンティティに変わります。2回目の試行:彼女の顔は40フレーム目で20歳老けました。3回目の試行:背景のロビーが病院の廊下に変わりました。

クリエイターたちは「生成して祈る」ループに何時間も費やしました。時々運が良く、ほとんどの場合は明らかな欠陥のあるコンテンツを納品し、クライアントが気づかないことを祈りました。彼らはいつも気づきました。

進化のタイムライン

2019-2020:フレームごとの狂気

初期の動画合成は、独立した画像のシーケンスとして動画を扱いました。画像生成モデルをフレーム1に適用します。次にフレーム2に。次にフレーム3に。結果?ちらつく混乱。各フレームは単独では一貫していました。一緒に置くと、悪夢でした。

研究者たちは基本的な解決策を試みました:前のフレームを歪めるための光流、単純な時間的平滑化、フレームブレンディング。これらは軽微な動きには役立ちましたが、複雑なシーンでは失敗しました。根本的な問題は残りました:画像モデルは時間を理解していませんでした。

2021-2022:3D畳み込み時代

ブレークスルーは3D畳み込みから来ました——2D畳み込みの空間的理解を時間次元に拡張することです。モデルは、独立した画像ではなく、統一されたボリュームとして小さな動画チャンク(8-16フレーム)を処理できるようになりました。

Google AI DeepMindの2021年のTemporal Cycle-Consistency(TCC)研究は、モデルがフレーム間の意味的対応関係を学習できることを示しました。初期の動画拡散モデルは、アーキテクチャに時間層を組み込み始めました。ちらつきは減少しました——しかし消滅しませんでした。

2023:潜在拡散の爆発

Stable Diffusionが2022-2023年に人気を博したとき、誰もがそれを動画に適用しようとしました。結果……問題がありました。潜在拡散モデル(LDM)は画像には優れていましたが、時間的一貫性に苦労しました。各フレームは潜在空間で生成され、小さな変化が目に見えるちらつきに拡大されました。

クリエイターは複雑な回避策を開発しました:

  • グリッド法:同じ潜在空間で複数のキーフレームを同時に生成
  • ControlNetガイダンス:ポーズや深度マップを使用して一貫性を強制
  • TokenFlow技術:フレーム間で潜在特徴を伝播
  • ポストプロセス:デフリッカーフィルター、時間的平滑化、光流安定化

これらは役立ちました。しかし、銃創に絆創膏を貼るようなものでした。基盤モデルはまだ時間を後付けとして扱っていました。

2024:トランスフォーマーベースの一貫性

動画生成がトランスフォーマーアーキテクチャに移行することは、ゲームチェンジングでした。畳み込みが局所的なパッチを処理するのではなく、アテンションメカニズムは任意のフレームを任意の他のフレームと関連付けることができます。Video Diffusion Transformer(VDT)などのモデルは、時間的一貫性の顕著な改善を示しました。

重要な革新には以下が含まれます:

  • 循環潜在伝播:生成ステップ間で状態を維持
  • 光流ガイドアテンション:動き情報を使用して特徴伝播をガイド
  • マルチフレーム条件付け:複数の前フレームに基づいて新しいフレームを生成

ちらつきは消えていませんでしたが、薄れていました。

2025:Seedance 2.0ネイティブ一貫性

Seedance 2.0は、アーキテクチャレベルで時間的一貫性に取り組みます。デュアルブランチ拡散トランスフォーマーは、時間を解決すべき問題として扱うのではなく——時間をデータの固有の次元として扱います。

Seedance 2.0:一貫性のアーキテクチャ

ネイティブ時間モデリングの仕組み

Seedance 2.0は、いくつかのメカニズムを通じて時間的一貫性を実現します:

  1. 統一時空間アテンション:モデルは、空間を先に処理してから時間を処理する(またはその逆)のではなく、両方の次元を同時に扱います。各フレームの各ピクセルは、学習されたアテンションパターンを通じて、各フレームの他のすべてのピクセルと関連付けられます。

  2. 時間的増強:トレーニング中、モデルは制御された時間的摂動で同じシーケンスを見ます——速度変化、フレームの欠落、小さな時間的シフト。物体が持続し、動きは連続的であり、世界は物理法則に従うことを学びます。

  3. デュアルブランチ処理:動画と音声を専用のブランチに分離することで、各ブランチはその領域に完全に集中できます。動画ブランチは、視覚的な時間的一貫性専用の計算予算とパラメータ容量を持ちます。

  4. キャラクター一貫性:フレーム間でアイデンティティを維持する専用のメカニズムで、顔、服装、主要な特徴が複雑な動きの中でも安定したままであることを保証します。

比較:一貫性の品質

指標2023 LDM時代2024トランスフォーマー時代Seedance 2.0 (2025)
顔のアイデンティティドリフト高(2-3秒で目に見える)中程度(5-8秒で目に見える)低(15秒以上安定)
背景の安定性悪い(継続的なテクスチャ変化)良い(わずかな変化)優秀(ロックされている)
照明の一貫性悪い(ちらつきが一般的)良い(徐々な変化)優秀(安定している)
動きの一貫性中程度(不自然な物理)良い(改善された物理)優秀(自然な)
ポストプロセスの必要性重度のデフリッカーが必要軽微な平滑化最小限または不要

これがクリエイターにとって意味すること

実際の影響は変革的です:

  • キャラクタードリブンナラティブ:あなたの主人公はフレーム1からフレーム360まで同じ人に見えます
  • 一貫した環境:背景は安定したまま、適切なシーン設定が可能になります
  • 信頼できる物理:物体が自然に動き、相互作用し、初期のAI動画の「浮遊」感がありません
  • イテレーションの削減:一度生成し、使用します。「生成して祈る」はもうありません。

リアルな例

ウォーキングシーケンス——時間的一貫性の古典的なテスト——を考えてみてください。

初期LDMの試み(2023):8歩目までに、衣服のテクスチャはすでに変わっていました。20歩目までに、背景は変形していました。40歩目までに、キャラクターは認識できなくなっていました。使用可能な総フレーム数:おそらく24フレーム。

Seedance 2.0(2025):キャラクターは15秒間歩きます。服装は織物のテクスチャと照明応答を保ちます。背景は一貫しています。顔は認識可能なままです。足の配置は自然な物理に従います。クリップ全体が使用可能です。

同じプロンプト。異なるアーキテクチャ。異なる世界。

今すぐ始められること

最初のステップ

以前の最悪のちらつきクリップを見つけてください。すべてが間違っていた部分です。今、Seedance 2.0で同じプロンプトを試してください:

  1. 動く主体を持つ10秒クリップを生成します
  2. フレームごとに見ます(編集ソフトウェアの矢印キーを使用)
  3. 以前のツールがどこで失敗していたかに注目します
  4. 今何が一貫しているかを観察します

違いは微妙ではありません。これはアマチュアとプロフェッショナルの違いです。

最大一貫性のプロンプトテンプレート

主体:[明確な特定の説明、定義された特徴を持つ]
主体修飾子:[特定の服装、髪型、目立つマーク]
動き:[連続的で自然な動きの説明]
環境:[固定された要素を持つ明確な背景]
照明:[特定の一貫した照明設定]
物理:[現実世界の物理的相互作用]
一貫性の優先度:高
時間:10-15秒

例:
"短いカーリーブラックヘアの若い男性、細いシルバーフレームの眼鏡、オリーブグリーンのジャケット、
左眉の上に特徴的な傷、認識可能な噴水がある都市公園を歩く、
左側からの午後のゴールデンアワー照明、一貫した影を落とす、
自然な歩行と正確な足の配置、地面の落ち葉は風以外では静止している、
10秒、16:9"

今後12ヶ月

基本的なシーンでは、時間的一貫性は「解決」されています。最前線は今、以下に向かっています:

  • マルチシーン一貫性:キャラクターが異なる位置と照明でも同じように見える
  • 長編の安定性:劣化なしの60秒クリップ
  • インタラクティブな一貫性:一貫性を保ちながらリアルタイム生成
  • スタイルロックシーケンス:統一された視覚処理を持つ完全な映画

ちらつきは死にました。動く映像に栄光あれ。

シリーズナビゲーション

これはSeedance 2.0 Masterclass進化シリーズの第1課、第3篇です。


時間的一貫性は、新奇さと映画の間の壁でした。それは倒されました。一貫したAI動画の時代が始まります。