Yubi icon

Yubi

Yubiは、Apple Silicon搭載MacとmacOS 26向けのプッシュトゥトーク入力・画面アシストユーティリティ。音声をローカルで文字起こしし、カーソル位置へ入力。Macアプリのハンズフリー操作を支援します。

Yubi

Mac向けのローカル音声入力と画面アシスト

Yubiは、macOS 26を搭載したApple Silicon Mac向けのプッシュトゥトーク入力ユーティリティです。右Optionキーを押したまま話し、キーを離すと、Yubiが音声を文字起こしし、カーソルがアクティブな位置に結果のテキストを入力します。これにより、ユーザーは手前に表示されているアプリへ音声で入力できます。

別の右Commandショートカットでは画面アシストを利用できます。Yubiは最前面ウィンドウのアクセシビリティツリーを調べてコントロールを特定し、その場所を示します。押す操作も選択できます。音声入力はローカルで処理されますが、オプションのテキスト整理や画面アシストでは、元の音声をアップロードするのではなく、依頼された限定的なデータがClaudeで処理するためにYubiのサーバーへ送信される場合があります。

機能

プッシュトゥトーク入力

右Optionキーを押したまま話し、キーを離すと、文字起こしされた言葉が現在のカーソル位置に入力されます。

デバイス上での文字起こし

文字起こしはAppleのSpeechAnalyzerまたはwhisper.cppを使ってMac上で実行されるため、録音した音声はアップロードされません。

画面案内

オプションの画面アシスト機能は、スクリーンショットを撮るのではなく、最前面ウィンドウのアクセシビリティツリーを読み取り、探しているコントロールを指し示します。

オプションのコントロール操作

関連するスイッチを有効にすると、画面アシストで特定したコントロールを押せます。オプションの画面アシスト処理を送信する前に、Yubiは送信される正確なデータ内容を表示します。

権限に配慮した設計

Yubiはマイクとアクセシビリティの権限を要求します。画面アシストのワークフローにスクリーン収録の権限は必要ありません。

カーソル位置で動作

サイトでは、Slack、Mail、Notes、Messages、System Settings、Calendarでの音声入力と画面操作支援のワークフローが紹介されています。テキストはアクティブなアプリのワークフローを通じて入力されます。

使用例

  • チームへの近況報告をすばやく作成

    別の文字起こしウィンドウに切り替えたり、メッセージを打ち直したりせずに、Slackの会話へ近況報告を音声入力します。

  • メールの下書き作成

    丁寧なフォローアップや慎重に表現を選んだ返信をMailに直接話しかけて入力し、送信前にメッセージ作成画面で確認します。

  • 多言語のメモを取る

    Notesに日本語と英語のメモや詳しいアイデアを記録します。サイトの例には、日本語だけでなく英語で話す例も含まれています。

  • 正確なメッセージを作成

    具体的なコーヒーの注文やメッセージ内容を声に出して伝え、結果のテキストをMessagesに直接入力します。

  • Macアプリ内のコントロールを探す

    画面アシストで関連する画面上のコントロールを特定し、設定の場所やCalendarを今日の表示に戻す方法を尋ねます。

Pros and Cons

Pros

  • 音声入力の音声はMac上で処理され、アップロードされません。
  • アプリ間でコピーする代わりに、アクティブなカーソル位置へ直接テキストを入力できます。
  • 画面アシストはスクリーンショットや画面収録ではなく、最前面ウィンドウのアクセシビリティツリーを使用します。
  • 基本の音声入力プランは無料で、無制限の音声入力が利用できると記載されています。

Cons

  • macOS 26以降とApple Silicon Macが必要です。
  • 画面アシストのワークフローはプランによって利用上限が設定されており、入手可能な製品情報では各タスクのカウント方法が十分に説明されていません。
  • YubiはMac App Storeでは配布されておらず、マイクとアクセシビリティの権限が必要です。

FAQ

Yubiには何が必要ですか?

Yubiは、macOS 26を搭載したApple Silicon Mac向けのプッシュトゥトーク入力アプリです。マイクとアクセシビリティの権限が必要です。アプリにwhisper.cppが組み込まれているため、Mac App StoreではなくMac向けダウンロードとして配布されています。

Yubiの音声入力はどのように動作しますか?

右Optionキーを押したまま話し、キーを離します。文字起こしされたテキストが、現在カーソルがある手前のアプリの位置に入力されます。

Yubiは音声録音をクラウドに送信しますか?

はい。Yubiのローカル文字起こしにはAppleのSpeechAnalyzerまたはwhisper.cppが使用され、音声はアップロードされないとサイトに記載されています。オプションのテキスト整理や画面アシストでは、関連するテキストまたはアクセシビリティ情報がClaudeで処理するためにYubiのサーバーへ送信される場合があります。画面アシストで送信される正確なデータ内容は、送信前に表示されます。

Yubiの各プランには何が含まれますか?

ホームページには、無料プランが月額¥0で、無制限の音声入力と月10タスク、Personalが月額¥1,480または年額¥14,800で月60タスク、Proが月額¥2,980で月150タスクと記載されています。サイトではこれらのタスクを画面の操作支援に関連して説明していますが、タスク数の詳しいカウント方法は示されていません。

Yubiはどのアプリに対応していますか?

例では、Slack、Mail、Notes、Messages、System Settings、Calendarを使ったワークフローが示されています。利用可能な製品情報から、これらがネイティブ統合であるとは確認できません。Yubiはカーソル位置にあるアプリへのテキスト入力と、最前面の画面の操作支援を行うものとして紹介されています。

Quick Facts

カテゴリー
macOS向け音声入力・生産性ユーティリティ
プラットフォーム
Apple Silicon搭載のmacOS 26以降
入力方法
右Optionキーを押す、話す、離す
画面アシスト
右Commandショートカット、アクセシビリティツリー方式
アプリサイズ
約6 MB
表示価格
無料プラン、Personal:月額¥1,480または年額¥14,800、Pro:月額¥2,980
Yubi - AI Tool, Features, Use Cases & Alternatives | UStack