動画から3Dアニメーションへ
Animate 3Dは、スーツや特別なキャプチャ機材を必要とせず、ブラウザベースのワークフロー内で通常の動画を3Dアニメーションに変換します。
DeepMotion
DeepMotionは、動画から3Dアニメーションを生成するAnimate 3Dと、テキストから動きを作るSayMotionを備えたWebベースのAIモーションキャプチャ＆3Dアニメーションプラットフォームです。
DeepMotionとは
DeepMotionは、動画またはテキストを3Dアニメーションに変換することに特化したAIモーションキャプチャ＆ボディトラッキングプラットフォームです。主な製品は、動画を3Dアニメーションに変換するAnimate 3Dと、テキストプロンプトから3Dモーションを生成するSayMotionです。
この製品はWebブラウザで動作するよう設計されており、SayMotionとAnimate 3Dのページではブラウザベースでのアクセスが明記されています。DeepMotionは、専用のキャプチャスーツや専用のモーションキャプチャ機材なしでアニメーションを制作したいクリエイターやチーム向けに提供されており、FBX、BVH、GLB、MP4などの一般的な制作形式へ書き出しできます。
主な機能
テキストから3Dアニメーションへ
SayMotionはテキストプロンプトを3Dモーションに変換し、ユーザーはキャラクターを選んでブラウザ上で直接アニメーションを生成できます。
複数の書き出し形式
Animate 3DはFBX、BVH、GLB、MP4での書き出しに対応しており、結果を他のツールやパイプラインへ移しやすくなっています。
複数人物のモーションキャプチャ
Animate 3Dは1本の動画から最大8人を追跡でき、全身のモーション、表情、手のジェスチャーに対応しています。
アニメーション制御
Animate 3Dのインターフェースには、顔と手のトラッキング、物理シミュレーション、足のロック、手と地面の接触、モーションスムージングなどの設定があります。
ドキュメントと導入支援
Animate 3Dのドキュメントには、無料のAnimation Credit Program、スターターパッケージ、キャプチャガイドライン、そして導入を支援するサブスクリプション付きのドキュメントが記載されています。
チームがDeepMotionをよく使う場面
動画をキャラクターアニメーションに変換する
スーツや専用カメラなしでモーションキャプチャを行いたいときに、収録済み映像からキャラクターアニメーションを作成します。Animate 3Dのワークフローは動画入力を受け取り、選択したキャラクターへモーションをリターゲットします。
テキストからアニメーションを試作する
より速いコンセプト検討やプロトタイピングの手段が必要なときに、テキストプロンプトからモーションを生成します。SayMotionでは、プロンプトを入力し、キャラクターを選び、ブラウザ上でモーションを作成できます。
複数人物のシーンを扱う
1つのシーンに複数の出演者がいる場合に、複数人物を含む映像を処理します。Animate 3Dのページでは、1本の動画で最大8人を追跡できると説明されています。
納品向けにモーションを調整する
顔トラッキング、手トラッキング、物理シミュレーション、足のロック、モーションスムージングなどの制御で、制作向けにアニメーション品質を調整します。
出力を他のパイプラインへ渡す
標準形式を使って、生成したアニメーションを下流のツールやプロジェクトへ書き出します。DeepMotionでは、ワークフロー互換性のためにFBX、BVH、GLB、MP4が案内されています。
Pros and Cons
Pros
- Webブラウザで動作するため、機材依存の高いモーションキャプチャワークフローに比べてセットアップを抑えられます。
- 動画からアニメーションへの変換とテキストからアニメーションへの変換の両方に対応しています。
- FBX、BVH、GLB、MP4などの一般的な形式に書き出せます。
- ドキュメントには、キャプチャガイドライン、設定、スターターリソース、サポートチャネルが含まれています。
- このプラットフォームは、個人クリエイターだけでなく、APIベースやアプリケーションのワークフローにも対応しています。
Cons
- 参照したページには、公開されている価格情報やプランの上限が記載されていません。
- 一部の機能は、単一の概要ページではなく製品ページとドキュメントページに分かれて説明されているため、新規ユーザーはワークフローを理解するのに複数の資料を読む必要がある場合があります。
FAQ
DeepMotionは何を提供していますか？
DeepMotionは、動画から3Dアニメーションを生成するAnimate 3Dと、テキストから3Dアニメーションを生成するSayMotionを提供しています。ソースページでは、どちらの製品もブラウザベースで作成と書き出しに対応していることが示されています。
DeepMotionはブラウザで使えますか？
SayMotionのページには、インターネット接続とWebブラウザが必要と記載されています。Animate 3Dのページでも、Animate 3D Cloudを通じたブラウザアクセスが説明されています。
どの書き出し形式に対応していますか？
Animate 3Dは、アニメーションをFBX、BVH、GLB、MP4で書き出しできます。SayMotionのページでも、テキストプロンプトから作成したモーションについて同じ書き出し形式が案内されています。
どのような動きをキャプチャできますか？
Animate 3Dのドキュメントでは、全身の動き、表情、手のジェスチャー、複数人物に対応していると説明されています。Animate 3Dのページには、顔と手のトラッキング、モーションスムージング、物理シミュレーション、足のロックなどの機能も記載されています。
サポートやドキュメントはありますか？
DeepMotionは、ドキュメント、チュートリアル、Discord、問い合わせ先への導線を提供しています。料金ページには、API、ドキュメント、サポートリソースも掲載されています。
Quick Facts
- カテゴリ
- AIモーションキャプチャ / 3Dアニメーション
- 主な製品
- Animate 3D と SayMotion
- プラットフォーム
- Webブラウザ。Animate 3D Cloud はブラウザ経由でアクセス可能と説明されています
- 出力形式
- FBX、BVH、GLB、MP4
- ソースドメイン
- deepmotion.com
- 注目のワークフロー
- 動画から3Dアニメーション、テキストから3Dアニメーション
DeepMotionの代替品
ByteAsk
ByteAskは、C/C++向けのターミナル起点AIコーディングエージェント。リポジトリを編集し、コンパイラやデバッガ、サニタイザ、テストで変更を検証してから差分を表示。無料枠あり。
hob
hobは、エージェントのセッション、ターミナル、履歴、後続作業を、既存のツールやプロバイダーに合わせて整理できる独立したコーディングエージェント向けワークスペース。ローカルでの制御を重視する開発者に最適。
Ably Chat
Ably Chatは、カスタムのリアルタイムチャットアプリを構築できるチャットAPIプラットフォームです。ルーム単位のメッセージ、入力中表示、プレゼンス、リアクション、メッセージ更新に対応し、利用量ベースの料金も選べます。
Manta AI
Manta AIは、URLからアプリの挙動を把握し、回帰を検出し、スクリプトやセレクタ管理なしでテストを生成できる自律型Webアプリテストツールです。
SonOf
SonOfは、リポジトリとPMツールに接続し、コードベースと周辺の製品コンテキストを監査して、承認済みの作業をシニアエンジニアのレビュー付きで公開済みチケットに変えます。
Ghost
Ghostは、チャット、コード生成、コマンドラインでのタスク実行に対応したターミナル向けAIアシスタントです。無料モデルを同梱し、Linux、macOS、Windowsで使えます。オープンソースです。