メインコンテンツへ移動

仮想マイク翻訳ツール

TCVoiceAI Micを使ったmacOSでの仮想マイク翻訳

TCVoiceAIは、翻訳音声、元の音声、メインアプリ待機中の通常のパススルーに、アプリが管理する仮想オーディオデバイスを使用します。ユーザー向けデバイスは、通話へ送る音声用のTCVoiceAI Micと、相手から受け取る音声用のTCVoiceAI Speakerです。

片側のみの設定: バックグラウンドヘルパーは、選択した物理デバイスと仮想デバイスの間で音声を中継するだけです。音声認識、文字起こし、翻訳、録音、保存、内容の検査、会話内容のアップロードは行わず、サーバーにも接続しません。

設定手順

仮想オーディオ経路の仕組み。

  1. 01

    通話アプリガイドを開く

    TCVoiceAIでインストール済みのアプリを選び、デバイス設定の詳しい手順を確認するか、権限を付与してFaceTimeを自動設定します。

  2. 02

    フォアグラウンドセッションを開始

    メインアプリがオーディオ経路を排他的に制御するのは、翻訳音声または元の音声のセッション実行中だけです。

  3. 03

    会話モードを使用または切り替え

    翻訳音声は翻訳を読み上げます。元の音声は実際の声と任意の履歴を維持し、バイリンガルセッションでは通話中にモードを切り替えられます。

  4. 04

    ルーティングをバックグラウンドヘルパーに戻す

    セッションが停止するかアプリが閉じると、バックグラウンドヘルパーが元の音声のパススルーを再開するため、通話アプリは仮想デバイスを引き続き使用できます。

製品の詳細

一つの仮想経路と、明確に分かれたフォアグラウンドとバックグラウンドの役割。

ユーザー向けオーディオデバイス

対応する通話アプリとブラウザ通話では、翻訳音声または元の音声に使用する二つのユーザー向け経路として、TCVoiceAI MicとTCVoiceAI Speakerを選択します。

翻訳音声の制御

翻訳音声の使用中は、フォアグラウンドアプリが両方向を認識して翻訳し、適切な聞き手へMacの音声を再生します。

返信候補の再生

翻訳音声で返信候補を確認した後、「相手に読み上げ」を選ぶと、相手言語の音声が同じTCVoiceAI Mic経路から送信されます。

元の音声の制御

元の音声の使用中はパススルーが継続し、任意の履歴には、翻訳の読み上げを行わずにバイリンガル翻訳または同一言語の文字起こしが保存されます。

安全な通話中のモード切り替え

バイリンガルセッションでは、停止せずに翻訳音声と元の音声の間で経路の制御を切り替えられます。新しい経路への切り替えを完了できない場合は、以前のモードに戻ります。

独立したフォアグラウンド経路

フォアグラウンドアプリは、通話の各方向に個別の認識・翻訳フローを割り当てます。翻訳音声にも方向ごとの個別の再生キューがあります。両方向を同時に処理しながら、それぞれの方向内ではフレーズの順序を維持します。

バックグラウンドヘルパー

アプリが「準備完了」、「停止」、または閉じている間、バックグラウンドヘルパーは選択した物理マイクを仮想マイクへ中継し、仮想スピーカーの音声を選択した物理出力へ中継します。

ルーティングのみで、聴取も収集もしません

バックグラウンドヘルパーがオーディオバッファを処理するのは、経路を維持するためだけです。音声認識、文字起こし、翻訳、録音、保存、内容分析、アップロード、サーバーリクエストは一切実行しません。

内部エンドポイントを非表示に維持

TCVoiceAI Mic FeedとTCVoiceAI Speaker Tapはアプリが使用する内部エンドポイントです。通話アプリでは選択しないでください。

macOSアプリから

アプリの実装に基づいて確認済みです。

  • TCVoiceAI Micは、対応する通話アプリやブラウザ通話で入力として選択できる仮想マイクです。
  • TCVoiceAI Speakerは、対応する通話アプリやブラウザ通話が相手の音声を翻訳機能へ戻すために使用する仮想スピーカーまたは出力経路です。
  • これらの仮想オーディオデバイスが必要なのは、TCVoiceAIを実行するMacだけです。
  • TCVoiceAI Micは翻訳されたMacの音声を通話へ送り、通話者の元の声を再現することはありません。
  • 翻訳音声では、承認した返信候補をTCVoiceAI Mic経由で相手に読み上げられます。ユーザーの操作なしに自動再生されることはありません。
  • 元の音声モードでは通話者の実際の声を経路へ送りながら、フォアグラウンドアプリでバイリンガルまたは同一言語の履歴を作成できます。
  • 同一言語セッションでは元の音声を使用します。文字起こしのみの発言では翻訳リクエストも翻訳語数の利用枠も必要ありません。
  • バイリンガルセッションでは通話中にモードを切り替えられ、経路を安全に移行できない場合は以前のモードへ戻ります。
  • 翻訳音声では方向ごとに個別のキューを使用するため、新しい音声は同じ方向の先行音声を待ちますが、反対方向の音声を妨げません。
  • フォアグラウンドアプリが音声を排他的に制御するのは、会話セッションがアクティブな間だけです。
  • バックグラウンドヘルパーが利用可能な場合、アプリが待機中、停止中、または閉じている間は、元の音声のパススルーを制御します。
  • バックグラウンドヘルパーはルーティングを便利にするためだけに存在し、会話内容の聴取、分析、収集、録音、保存、アップロードを実行しません。
  • バックグラウンドヘルパーでは、音声認識、翻訳、テキスト読み上げ、認証、サーバー処理のいずれも実行されません。
  • バックグラウンドヘルパーが無効、「ログイン項目と機能拡張」の承認待ち、または利用不可の場合、待機中のパススルーは使用できません。ただし、アプリを開いてセッションを開始すれば、フォアグラウンドアプリが経路を制御できます。
  • 通話アプリまたはブラウザ通話で、選択した仮想マイクと仮想スピーカー/出力デバイスの使用が許可されている必要があります。
  • 同梱のHALバックエンドは、macOS上でユーザー向けの仮想マイクとスピーカーデバイスを公開します。
  • アプリは、仮想デバイス、機器セット、自動機器セット、TCVoiceAIの各エンドポイントを物理デバイスの選択肢から除外します。

TCVoiceAI Micを使ったmacOSでの仮想マイク翻訳

支払い方法を登録せず、月間利用枠付きで無料で始められます。

会話のプライバシーは設計段階から保護されています。