画面と音声の録画
macOSのマイクと画面収録へのアクセスを使用して、画面上で起きていることを、声で説明しながら記録します。
AIエージェント向けの画面録画
CAKIEは、AIエージェントに視覚的・音声的なコンテキストを伝えるために設計されたMacの画面録画アプリです。画面の状態をテキストだけで説明する代わりに、AIに理解してほしいことを話しながら画面を録画できます。
録画後、CAKIEは文字起こしとスクリーンショットのハイライトを提供します。動画、ハイライト、文字起こしを確認してから、「プロンプトをコピー」を使ってAIエージェントに引き継ぐ内容を貼り付けられます。文章だけの依頼では、画面に何が表示されているか、どの詳細が重要かを十分に伝えられない状況を想定したワークフローです。
機能
自動文字起こし
AIエージェントに渡す前に、録画と合わせて、話した内容をテキストで確認できます。
スクリーンショットのハイライト
CAKIEは、録画から関連する視覚的なコンテキストをAIに示すスクリーンショットのハイライトを提供します。
プロンプトをコピーするワークフロー
組み込みの「プロンプトをコピー」機能を使って、文字起こし、ハイライト、保存された動画への参照を含む引き継ぎ用の内容を作成できます。
確認と添付のオプション
結果を確認しながら動画とハイライトを切り替えられます。また、AIアプリがローカルファイルにアクセスできない場合は、スクリーンショットを添付できます。
利用例
視覚的な編集内容を説明する
Webサイト、アプリ、インターフェースをAIエージェントに見せながら、変更したい内容を説明します。目に見えるデザインと音声による指示の両方を含む依頼にできます。
複雑な画面のコンテキストを伝える
関連する詳細が複数ある画面を順に説明し、スクリーンショットのハイライトを使って、AIが回答時に考慮すべき部分を保持します。
ワークフローや問題を記録する
タスクや問題を、テキストで手順を再構成する代わりに、発生しているそのままの状態で録画します。その後、作成されたプロンプトをAIエージェントに貼り付けて支援を求めます。
確認済みのAIへの引き継ぎを準備する
依頼を送る前に動画と文字起こしを確認し、意図したコンテキストが明確になるまで、引き継ぎ内容を修正または保留します。
Pros and Cons
Pros
- 画面録画と音声による説明を1つの引き継ぎ内容にまとめて、AIエージェントに渡せます。
- 文字起こしとスクリーンショットのハイライトを追加し、視覚的なコンテキストを確認しやすくします。
- 共有する前に、動画、ハイライト、文字起こしを確認できます。
- コピー＆ペーストのワークフローに対応しており、AIアプリがローカルファイルにアクセスできない場合はスクリーンショットを添付できます。
Cons
- 現在はMacアプリとして提供されていますが、他のプラットフォームへの対応は記載されていません。
- 有効な料金ページに料金の詳細は掲載されていません。
- 一部のオプションのオンラインAI機能では、必要なテキストや画像がCAKIEのサーバーを経由してAIプロバイダーに送信される場合があります。
FAQ
CAKIEは何をしますか？
CAKIEは、画面と音声を録画し、文字起こしとスクリーンショットのハイライトを追加して、AIエージェントが説明を理解できるようにするMacアプリです。
録画をAIと共有するにはどうすればよいですか？
動画を録画して確認したら、「プロンプトをコピー」を選択し、生成されたプロンプトをAIエージェントに貼り付けます。プロンプトには、文字起こし、スクリーンショットのハイライト、保存された動画への参照が含まれます。
録画はMacに保存されますか？
録画と文字起こしはMac上で行われます。オプションのオンラインAI機能を有効にした場合、それらの機能に必要なテキストや画像が、CAKIEのサーバーを経由してAIプロバイダーに送信されることがあります。
共有する前に録画を確認できますか？
はい。共有する前に、動画とハイライトを切り替えて確認し、文字起こしを確認できます。別のアプリに貼り付けたり添付したりするまで、他のアプリと共有されることはありません。
CAKIEはどのプラットフォームに対応していますか？
CAKIEはMacアプリで、macOSのマイクと画面収録の権限を使用して、音声と画面上のコンテキストを記録します。
Quick Facts
- カテゴリー
- AI生産性向上・画面録画
- プラットフォーム
- Macアプリ
- 主なワークフロー
- 録画、確認、プロンプトのコピー、その後AIエージェントに貼り付け
- 出力
- 保存された動画、文字起こし、スクリーンショットのハイライト
- 権限
- macOSのマイクと画面収録
- 料金
- 提供されている料金ページには記載なし
CAKIEの代替品
SpeakoFlow
SpeakoFlowは、Windows、macOS、Linux対応の無料・オープンソースのデスクトップ音声入力アプリ。あらゆるアプリに дикationでき、Flow、要約整理、翻訳、画面認識アシスタントにも対応。
QuickQuill
QuickQuillは、macOSで使えるローカル動作の音声入力・文字起こしアプリです。会議の録音、書き起こし、要約、ノート書き出しをクラウドなしで行えます。
Zen Whisper
Zen Whisperは、Apple Silicon搭載MacのmacOS 14以降向けローカルファーストの音声入力・文字起こしアプリ。ほとんどのMacテキスト欄へ入力でき、メディアや対応公開リンクも文字起こし可能。110言語に対応。
Capso
Capsoは、macOS向けのネイティブなスクリーンショット・画面録画アプリ。キャプチャ、注釈、録画、OCRまで1つでこなす無料・オープンソースのCleanShot X代替です。
Speech to Text Converter
Speech to Text Converter は、ブラウザで使える文字起こしツールです。ライブ音声入力や音声・動画ファイルのアップロードに対応し、短い作業向けの無料プランと、無制限の文字起こし、AI要約、翻訳、話者識別、詳細な書き出し機能を備えたProプランがあります。
Flunkey
FlunkeyはWindows向けの音声入力中心の生産性レイヤー。話した内容をテキスト化し、AI支援の出力や記憶した文脈に変換。作業中のアプリを離れずに使えます。