Eleven v4 icon

Eleven v4

Eleven v4とEleven v4 Turboは、ナレーション、会話、多言語音声、リアルタイム音声エージェント向けの表現豊かなAI音声合成モデル。感情や話者の文脈、間、音声イベントを制御でき、Turboはストリーミング会話に最適化されています。

Eleven v4

ナレーションとライブ会話のための表現豊かな音声合成

Eleven v4とEleven v4 Turboは、書かれた台本から表現豊かな音声を生成するElevenLabsの音声合成モデルです。V4は感情豊かなナレーションや会話向けに位置付けられ、v4 Turboは同じ表現力の幅を備えつつ、リアルタイムのインタラクションや音声エージェント向けに設計されたモデルです。

両モデルは、話者を考慮した発話、感情の指示、音声イベント、複数話者のシーンに対応します。Eleven v4はElevenLabsのアプリで利用でき、v4 TurboはAPIとElevenAgentsで利用できます。さらに、ElevenLabsのプラットフォーム全体では、音声の選択、音声クローニング、Studioのワークフロー、吹き替え、その他のクリエイティブ向け音声ツールも提供されており、利用可否はプランやプロダクトの提供面によって異なります。

主な機能

文脈を理解した表現豊かな音声

話者の文脈、直前の出来事、意図した話し方を解釈し、より表現豊かなナレーションや会話を生成します。

スクリプトレベルの指示と音声イベント

[laughs]、[whispers]、間、[door slams]のような効果音のキューなどのタグをスクリプトに直接追加し、演技やシーンの細部を指示できます。

多言語・複数話者の生成

90以上の言語で、感情の変化、会話調の話し方、組み込みの効果音を含む複数話者のシーンを生成できます。

長尺コンテンツの一貫性

コンテキストステッチングにより、長いスクリプト全体でテンポと話し方を維持し、長尺の出力が分割されたように聞こえるのではなく、連続して聞こえるように設計されています。

再生成時の話者の安定性

会話やナレーション全体で同じ話者のアイデンティティを維持しながら個別の行を再生成でき、テイク間の声のぶれを抑えます。

リアルタイムTurboストリーミング

Eleven v4 Turboは双方向ストリーミングに対応しており、商品ページによると、初回発話までの時間の中央値は約150ミリ秒、推論レイテンシーの中央値は約100ミリ秒です。

ユースケース

  • オーディオブックとナラティブ制作

    複数のキャラクター、間、感情の指示、音声キューを使ってオーディオブック、連載ストーリー、ドラマ台本を制作し、コンテキストステッチングによって長尺コンテンツの一貫した発話を実現します。

  • ポッドキャスト、講座、解説コンテンツ

    会話調または説明調の音声、多言語版、制御されたテンポで、ポッドキャスト、解説コンテンツ、教育素材を制作します。

  • リアルタイム音声エージェント

    LLMがテキストを生成すると同時に音声をストリーミングするカスタマーサービス、営業、サポートのエージェントを構築し、応答、確認、エスカレーション、保留にそれぞれ異なる話し方を適用できます。

  • 多言語ローカライズ

    多言語音声と、クローン音声が対象言語に対応している場合のProfessional Voice Clonesを使用して、異なる市場の視聴者向けにローカライズされた音声コンテンツを生成します。

  • 動画、ゲーム、ブランドコンテンツ

    ElevenLabsの幅広い音声ライブラリと音声ツールを使い、動画、ソーシャルコンテンツ、ゲーム、広告向けのブランドボイスオーバーやキャラクター演技を制作します。

Pros and Cons

Pros

  • スクリプトタグ、間、感情、音声イベントによる表現の指示に対応します。
  • コンテキストステッチングと話者の安定性により、複数話者や長尺音声のワークフローに対応します。
  • 90以上の言語での音声に対応し、v4ではProfessional Voice Clonesを利用できます。
  • Turboはストリーミング、エージェントのループ、ライブ会話での応答時間向けに設計されています。
  • モデルに応じて、アプリ、API、エージェントのワークフロー全体で利用できます。

Cons

  • モデルごとの完全なプラン一覧、出力制限、すべてのAPIセットアップ要件について、利用可能な情報では明記されていません。
  • 音声クローニング、Studio、吹き替え、コラボレーションなど一部の機能はElevenLabsのより広範なプラットフォームの一部であり、選択したプロダクトやサブスクリプション階層によって異なる場合があります。

FAQ

Eleven v4とEleven v4 Turboはどこで利用できますか?

Eleven v4はElevenLabsのウェブアプリとモバイルアプリで利用でき、Eleven v4 Turboはリアルタイム音声ワークフロー向けにAPIとElevenAgentsで利用できます。

Eleven v4で表現や音声をどのように制御しますか?

Eleven v4では、[laughs]、[whispers]、[door slams]などのタグを含む指示をスクリプトに追加できます。また、複数話者の会話、感情表現、間、組み込みの効果音にも対応します。

Eleven v4 Turboは何向けに設計されていますか?

Eleven v4 Turboはライブインタラクション向けに設計されています。LLMがテキストを生成すると同時にストリーミング入力でき、双方向ストリーミングによって文が完成する前に音声をストリーミングで返せます。

どの言語と音声クローニングのオプションに対応していますか?

Eleven v4は90以上の言語での音声に対応しています。Turboは、日本語、スペイン語、ポルトガル語のテキストをネイティブなアクセントで発話すると説明されています。また、両モデルは、それぞれの音声が話す言語全体でProfessional Voice Clonesに対応します。

ElevenLabsのText to Speechの利用料金はどのように請求されますか?

ElevenLabsでは、製品間で共通のクレジットを使用します。Text to Speechは約1文字あたり1クレジットと記載されていますが、正確なコストはモデルやAPIの料金ルールによって異なる場合があります。プランには無料プランと有料プランがあります。

Quick Facts

カテゴリ
AI音声合成
モデル
Eleven v4とEleven v4 Turbo
主なワークフロー
ナレーション、会話、音声エージェント、リアルタイム会話
言語対応
Eleven v4では90以上の言語
Turboへのアクセス
APIとElevenAgents
プラットフォーム
ElevenLabsのウェブアプリとモバイルアプリ、API、エージェント製品

Eleven v4の代替品

Fylom icon

Fylom

Fylomは、トピックや質問をリサーチ済みのナレーション付きエピソードに変換するAIポッドキャスト生成ツール。入力・音声プロンプト、声の選択、定期配信型の番組視聴に対応。

Gemini 3.8 Text-to-Speech icon

Gemini 3.8 Text-to-Speech

Gemini 3.8 Text-to-Speechは、台本をカスタマイズ可能な音声に変換するGoogleの表現力豊かな音声モデル。声の設計や行ごとの演出、コンテンツ・吹き替え・音声エージェント向けの会話生成に対応。

Kugel 3.5 icon

Kugel 3.5

Kugel 3.5は、音声エージェントや電話応対向けの音声合成モデルです。短い返答、IPA発音、タイミング付きポーズ、文字単位のコード読み上げに対応し、Kugel 3の音声・言語・辞書・APIを継承。VAT別€0.0525/音声分、秒単位で課金されます。

Gemini 3.1 Flash TTS icon

Gemini 3.1 Flash TTS

Gemini 3.1 Flash TTSは、表現力の高いAI音声を生成し、スタイルや話し方を細かく制御できるGoogleのプレビュー音声合成モデルです。Gemini API、Google AI Studio、Vertex AI、Google Vidsで利用できます。

蓝藻AI icon

蓝藻AI

蓝藻AIは、テキストを音声に変換できるオンラインAI音声合成・配音ツールです。自助式の音声クローンにも対応し、短編動画やオーディオブックのナレーションに最適です。

Ondoku icon

Ondoku

Ondokuは、ブラウザで使える文字起こし・音声化ソフトです。テキストを.mp3でダウンロードでき、無料枠と有料プラン、多言語読み上げ、画像読み上げ、条件付き商用利用に対応します。