リアルタイム音声翻訳
会議やイベントをリアルタイムで翻訳し、各参加者が読む言語で提供します。
リアルタイム音声翻訳は、会議やイベントが進行中に音声をテキスト、またはオプションで音声に変換します。Spoken Language(話されている言語)を設定し、Translation(翻訳)言語を設定してから録音を開始します。
ライブセッションの音声を許可する#
JotMeがあなたの声を聞くためにマイクへのアクセスを許可し、オンライン会議の相手側の音声を聞くために画面またはシステムオーディオへのアクセスを許可します。システムオーディオがない場合、マイクからの音声のみを聞き取ります。
注意
macOSでは、システムオーディオの許可はJotMeを終了して再起動した後にのみ有効になります。
会議やイベントの前に準備する#
接続されたカレンダーイベントから始めると、メモを準備し、参加リンクを予約し、言語とオーディオ設定を保存できます。次回イベントを開くと、その設定が復元されます。準備についてはカレンダーを、配信についてはリアルタイム音声翻訳の共有を参照してください。
注記
ゲストは電話やコンピュータから共有されたブラウザリンクに参加できます。Chrome拡張機能は別のGoogle Meetワークフローであり、デスクトップホストのセッションには参加しません。
話される言語を設定する#
話される言語は実際に話されている内容であり、どのモデルがそれを文字起こしするかを決定します。トップバーの言語コントロールの両側をクリックし、モデルを選択してから、別々の列で話される言語と翻訳言語を選択します。
言語設定
AI モデルを選択
話す言語
相手が話している言語
翻訳の出力
表示される言語
| モデル | 最適な用途 | できること | 使用とトレードオフ |
|---|---|---|---|
| Basic | 日常の字幕や10のMultilingual言語間で切り替わる会話 | 選択された1つの話される言語を文字起こしするか、Basic → Multilingualで10言語を自動的に追跡します。ライブテキスト翻訳を提供します。 | 1×分。 標準の字幕と翻訳品質。 |
| Premium Quality | 英語と選択されたサポート言語の1つ | JotMeの最高品質の字幕とテキスト翻訳。選択された言語に加えて常に英語を文字起こしします。例えば日本語を選択すると、日本語と英語の両方を文字起こしします。 | 2×分。 セッションで予想されるサポートされている非英語言語を選択します。 |
| Fast (Audio) | 他のモデルがカバーしない言語、最も低い遅延、または音声から音声への翻訳 | 100以上の話される言語を事前に選択せずに認識します。翻訳された字幕を生成し、オーディオ設定後に一方向または双方向の翻訳音声を生成します。 | 5×分。 字幕翻訳の品質はBasicまたはPremium Qualityより低い場合があります。 |
これらの10言語は、英語、スペイン語、フランス語、ドイツ語、ヒンディー語、ロシア語、ポルトガル語、日本語、イタリア語、オランダ語です。話者が言語を切り替えるときに追跡します。すべての10言語を個別に選択する必要はありません。
開始前にこれを選択してください。JotMeは録音中に話される言語の変更をブロックします。なぜなら、文字起こしストリームがすでにそのモデルで実行されているからです。
翻訳を設定する#
翻訳には、話される言語の隣に独自のコントロールがあり、3つのモードがあります:
- Single: 1つのターゲット言語。
- Multilingual: Premiumで一度に最大3つのターゲット言語を表示します。言語を参照して、各モデルとその乗数を確認してください。
- Fast (Audio): 音声から音声へのモードで、話される言語もFastに設定されている場合に利用可能です。
双方向セッションでは、方向がYou hear(あなたが聞く)とOthers hear(他の人が聞く)とラベル付けされ、2つの言語は異なる必要があります。
環境を選択する#
Settings → Live session → Your environmentで、OnlineまたはIn-personを選択して、JotMeが話者を正しくラベル付けするようにします。デスクトップアプリの設定でマイクや他のセッション全体の設定を構成します。
翻訳品質を調整する#
Settings → Live session → Translation qualityは、速度とコンテキストのバランスを取ります。同じセクションには自動調整、リアルタイムメモリ、文字起こし品質が含まれています。デスクトップアプリの設定でコントロールとモデル固有の利用可能性を確認してください。
セッション中#
セッションウィンドウには3つのタブがあります:
- Transcript: 到着した文字起こしと翻訳テキスト。
- Ask: ライブセッションからの質問に回答します。
- Note: セッション後に文字起こしに基づいて強化されたMarkdownメモ。
Reverse translation(逆翻訳)は文字起こしツールバーから切り替え可能で、文字起こしウィンドウはセッションを停止せずに最大化または最小化できます。
制限が切れた場合#
JotMeは文字起こしとリアルタイム音声翻訳を別々に計測します。翻訳が切れた場合、文字起こしのみで続行できます。文字起こしが切れた場合、セッションは停止して保存されます。使用制限を参照して、プランの許容量、乗数、制限の動作を確認してください。
JotMeが会議やイベントを聞けない場合#
まずマイクとシステムオーディオのアクセスを確認してください。macOSでは、許可を与えた後にJotMeを終了して再起動してください。デバイスの選択と復旧手順については、トラブルシューティングを使用してください。
後で得られるもの#
停止すると、強化されたメモが作成され、セッションがRecordingsに保存されます。Note-takingを参照して、生成される内容を確認してください。参加者のためにグループチャットを作成したい場合は、停止前にポストセッションチャットを有効にしてください。Multilingual chatを参照してください。
ワークフローを選択する#
リアルタイム音声翻訳の共有
参加リンクを早めに予約し、チャットに投稿します。
音声から音声へ
音声から音声への翻訳と必要なオーディオルーティング。
対面会議
1台のマシンで対面の会話を翻訳します。
Zoom、Teams、Meet、その他のオンライン会議
既に使用している会議ツールと並行してセッションを実行します。
イベントと会議
参加者が自分の携帯電話で読む部屋を翻訳します。
ウェビナー
1人のスピーカーを複数の言語でオーディエンスに放送します。
関連機能#
リアルタイム音声翻訳はセッション記録とその周りのワークフローにフィードします。