WaveSpeedAI
← ブログ

ByteDance Dreamactor V2がWaveSpeedAIに登場

ByteDance DreamActor V2は、ドライビングビデオのモーションを画像内のキャラクターに転送します。非人間キャラクターや複数キャラクターにも優れたパフォーマンスを発揮。すぐに使えるR

2 min read
Bytedance Dreamactor V2
Bytedance Dreamactor V2 ByteDance DreamActor V2は、ドライビングビデオのモーションを画像内のキャラクターに転送します。非人...
Try it
ByteDance Dreamactor V2がWaveSpeedAIに登場

ByteDance DreamActor V2 でどんなキャラクターも動かせる

写真、イラスト、アニメキャラクター、カートゥーンの動物など、あらゆる画像を、実際の人物が動いているビデオとまったく同じように動かせるとしたら？それが ByteDance DreamActor V2 の可能性です。WaveSpeedAI で今すぐご利用いただけます。ByteDance が開発した革新的な時空間インコンテキスト学習フレームワークを基盤に構築された DreamActor V2 は、モーション転送技術における大きな飛躍を体現し、想像できるあらゆるキャラクターに対して滑らかで自然なアニメーションを実現します。

ブランドマスコットをアニメ化したいコンテンツクリエイター、イラストに命を吹き込みたいデジタルアーティスト、大規模に魅力的な動画コンテンツを制作したいマーケターなど、DreamActor V2 は静止画像と完全にアニメ化されたキャラクターの間にある障壁を取り除きます。

DreamActor V2 とは？

DreamActor V2 は ByteDance の第二世代モーション転送モデルであり、主に人物画像のアニメーションに特化した DreamActor-M1 アーキテクチャから進化しています。従来のモーション転送モデルの多くはスケルトン抽出とポーズ推定に大きく依存していました。この手法は人間に対してはある程度機能しますが、非人間キャラクターには全く通用しません。DreamActor V2 はこれとは根本的に異なるアプローチを採用しています。

このモデルは、参照外観とモーションキューを統合された潜在空間に融合させる時空間インコンテキスト学習戦略を使用しています。平たく言えば、ドライビングビデオの関節や骨格を検出しようとするのではなく、DreamActor V2 は生のビデオピクセルから直接モーションを理解することを学習します。これにより、人間のような体を持たないキャラクター、つまりカートゥーンの猫、ファンタジーの生き物、ロボット、抽象的なイラスト図形なども、人物の肖像と同じ流動性でアニメ化することが可能です。

その結果、研究者が「アイデンティティとモーションのトレードオフ」と呼ぶ問題を解決するモデルが実現しました。ほとんどのアニメーションモデルは、モーションの精度を犠牲にしてキャラクターの外見を保つか、モーションは正確でもキャラクターのアイデンティティを歪めるかのどちらかです。DreamActor V2 はその両方を達成しています。忠実なキャラクター保持と正確なモーション再現を同時に実現します。

主な特徴

あらゆるキャラクターに対応

DreamActor V2 は事実上あらゆる種類のキャラクターに対応しています。写真、デジタルイラスト、アニメアートワーク、3D レンダリング、カートゥーンマスコット――認識可能な形状を持つものであれば、モデルがアニメ化できます。この普遍性は最大の差別化要因の一つです。競合モデルが非人間の被写体に苦労し、歪みやアーティファクトを生じさせる一方で、DreamActor V2 は多様なキャラクタータイプにわたって構造的な安定性を維持します。

精密な表情とジェスチャーのキャプチャ

このモデルは、ドライビングビデオから人間の表情の全範囲をキャプチャします。微妙な顔の動き、頭の回転、視線の方向、リップシンク、手のジェスチャー、ボディランゲージ。このレベルの詳細さが、意図的で完結したアニメーションを生み出し、中途半端な仕上がりにはなりません。

マルチキャラクターシーン

一人の被写体しか扱えない多くのモーション転送ツールとは異なり、DreamActor V2 はマルチキャラクターシナリオで優れたパフォーマンスを発揮します。シーン内の複数の被写体にわたってモーションの協調性とアクションの完全性を維持するため、より複雑な制作ワークフローにも適しています。

フレーム間の構造的安定性

顔、手足、体の形状が生成されたビデオ全体にわたって一貫した形を保ちます。このフレーム間の安定性により、特に急激な動きや複雑なジェスチャーの際に多くの AI アニメーションツールを悩ませる不気味な歪みが大幅に軽減されます。

シンプルな 2 入力ワークフロー

ワークフローはこれ以上ないほどシンプルです。キャラクター画像とドライビングビデオを用意するだけ。リギングも、ポーズ推定のセットアップも、手動キーフレームも不要です。モーション抽出から最終的な動画生成まで、モデルがすべてを処理します。

実際のユースケース

バーチャルアバターとデジタルヒューマン

バーチャル会議、ライブ配信、インタラクティブな体験向けに、実際の人間の動きをミラーリングするアニメーションアバターを作成します。DreamActor V2 の表情キャプチャにより、デジタルヒューマンが反応的で本物らしく感じられます。

ブランドとマーケティングコンテンツ

SNS キャンペーン、広告、プロモーション動画向けに、ブランドマスコット、イラスト化されたキャラクター、製品アイコンをアニメ化します。モーションキャプチャスタジオを雇わずに、静的なロゴキャラクターをダイナミックなプレゼンターに変えることができます。

コンテンツクリエイターのワークフロー

SNS クリエイターは TikTok、Instagram Reels、YouTube Shorts などのプラットフォーム向けに魅力的なキャラクターアニメーションを制作できます。自分のイラスト化またはスタイル化されたバージョンに、自分の動きをドライビングビデオとして使用して、ダンス、リアクション、スキットを演じさせることができます。

ゲームとエンターテインメント

シンプルなウェブカメラの映像から取得したリアルなモーションで、ゲームキャラクター、NPC、またはプロモーションアセットをアニメ化します。本格的な制作パイプラインにコミットする前に、キャラクターアニメーションをプロトタイプ化できます。

教育とトレーニング

教育コンテンツ用にアニメ化された講師やガイドキャラクターを作成します。一つのイラストキャラクターが、自然で魅力的な動きでレッスンを提供し、コンセプトを実演し、学習者にプロセスを案内できます。

WaveSpeedAI で始める

WaveSpeedAI で DreamActor V2 を始めるには、いくつかの簡単なステップを踏むだけです。

  1. キャラクター画像を準備する — 明確な正面向きの肖像またはキャラクター画像を使用します。画質が高いほど、アニメーションの結果も良くなります。

  2. ドライビングビデオを録画または選択する — 転送したい動きをキャプチャします。最良の結果を得るために、適切な照明、明確に見える動き、背景の動きが少ない状態で一人の人物を使用してください。

  3. モデルを実行する — DreamActor V2 モデルページに両方の入力をアップロードして送信します。WaveSpeedAI がコールドスタートなし、高速推論で残りを処理します。

  4. アニメーション動画をダウンロードする — 結果を確認してダウンロードします。ドライビングビデオが短いほど処理が速いため、実験する際は短いクリップから始めてください。

WaveSpeedAI API を使用して、DreamActor V2 をアプリケーションに直接組み込むこともできます。

import wavespeed

output = wavespeed.run(
    "bytedance/dreamactor-v2",
    {
        "image": "https://your-image-url.com/character.png",
        "video": "https://your-video-url.com/driving.mp4",
    },
)

print(output["outputs"][0])

料金

DreamActor V2 はシンプルな時間ベースの料金体系を採用しています。

動画の長さ料金
1 秒$0.05
5 秒$0.25
10 秒$0.50
30 秒$1.50

料金はドライビングビデオの長さに基づいて 1 秒あたり $0.05 で計算されます。隠れた手数料や、時間以外のリクエストごとの料金はありません。

なぜ WaveSpeedAI なのか？

  • コールドスタートなし — リクエストは毎回すぐに処理が始まります
  • 最高のパフォーマンス — 高速推論に最適化されたインフラ
  • シンプルな REST API — 数行のコードでモーション転送をあらゆるワークフローに統合
  • 手頃な料金 — 使った分だけ支払う透明な秒単位の課金

まとめ

ByteDance DreamActor V2 は AI を活用したモーション転送の新たなスタンダードを打ち立てます。リアルな肖像からカートゥーンの動物、抽象的なイラストまで、あらゆる種類のキャラクターを自然で安定したモーションでアニメ化できる能力により、クリエイター、マーケター、開発者、スタジオのいずれにとっても汎用性の高いツールとなっています。ユニバーサルなキャラクターサポート、マルチキャラクター機能、精密な表情キャプチャの組み合わせにより、以前は高価なモーションキャプチャセットアップや面倒な手動アニメーション作業の背後に閉ざされていたクリエイティブな可能性が広がります。

あなたのキャラクターに命を吹き込む準備はできていますか？WaveSpeedAI で DreamActor V2 を試す →

共有