VRChatには様々なワールドがあり、世界中の人とコミュニケーションを取ることができます。
しかしワールドでもコミュニケーションでもメインで使用される言語は「英語」。
英語が分からなければ楽しめるワールドは激減し、コミュニケーションの相手も限定されてしまいます。
そこで今回は、
- ゲーム内の表示を切り取って画像翻訳にかけられる『VRHandsFrame』
- デバイスに流れる音声を翻訳できる『VRCT』
の２つの翻訳ソフトを使って、英語ワールドや英語コミュニケーションを助けてもらいましょう！
なおどちらのソフトもVRChatでの使用を想定されていますが、
- 『VRHandsFrame』 ⇒ SteamVRを使用する全てのゲーム
- 『VRCT』 ⇒ パソコン上に流れる全ての音声
でも使用できますので、VRChatを遊ばない人にもおすすめです！
【準備】DeepL翻訳のAPIを使えるようにする
『VRHandsFrame』・『VRCT』どちらもDeepL翻訳のAPIに対応しています。
両ソフトを導入する前に、DeepL翻訳のアカウントを作成し、API認証キーを手に入れましょう。
無料プランのAPIでは、1か月間に50万文字まで翻訳することができます。
なおイタズラ防止のため、アカウント作成時にクレジットカードを登録する必要があります。
料金が発生するのは任意で有料プランでアップグレードしたときのみで、50万文字を超えても料金は発生しませんのでご安心ください。
DeepLのアカウントを作成する手順
アカウントは、DeePL翻訳ページ上部にある プロダクト > DeepL API から作成することができます。
【外部リンク】DeepL翻訳
APIのページで「無料で登録する」を選択しましょう。
DeepLアカウントの新規作成画面になるので、登録したいメールアドレスを入力し「続行」を押します。
続いてパスワード設定画面になるので、8文字以上で好きなパスワードを入力し「アカウントを作成」を押します。
個人情報の入力画面になりますので、表示に従って入力して「続行」を押します。
クレジットカードの入力を求められますが、料金が発生するのは任意で有料プランでアップグレードしたときのみで、50万文字を超えても料金は発生しません。
最後に利用規約の同意で2か所にチェックを入れ（メール通知は任意）、「無料で登録する」をクリックすれば登録は完了です。
DeepL API Freeの確認方法
右上にあるアカウントアイコンをクリックし、「アカウント」を選択します。
ご利用中のアカウントから「APIキー」を選択します。
右の方にある「キーを作成」をクリックします。
APIキーに名前を付けられるので、好きな名前を入力して（例として「VRChat」と入力）「キーを作成」をクリックします。
作成したAPIキーが表示されます。
このAPIキーを『VRHandsFrame』と『VRCT』で使用します。
『VRHandsFrame』の導入（SteamVRオーバーレイで動作する画像翻訳）
指でフレームを作成することでゲーム内の文字を翻訳してくれる『VRHandsFrame』を導入しましょう。
SteamVRのオーバーレイアプリとして機能するため、SteamVRで動作する全てのゲームで使用することができます。
導入は次の2ステップで行います。
- 『VRHandsFrame』をダウンロードする
- 『VRHandsFrame』の設定にDeepL APIを入力する
なお『VRHandsFrame』には他にもスクリーンショット機能とQRコードの読み込み機能がありますが、ここでは解説しません。
詳細な使用方法を確認したい方は、公式のオンラインマニュアルをご確認ください。
【外部リンク】 VRHandsFrame オンラインマニュアル
『VRHandsFrame』のダウンロード
『VRHandsFrame』はBOOTHにて無料でダウンロードすることができます。
ダウンロードにはPixiv IDが必要のため、持っていない方はPixivに登録しましょう。
【外部リンク】VRHandsFrame - 視界を切り取るVRオーバーレイアプリ（BOOTH）
ダウンロードしたzipファイルをパスに日本語が含まれない場所に解凍し、中にある「VRHandsFrame.exe」を実行します。
ユーザー名に日本語を使用している場合は、「C:」直下などユーザー名が含まれない場所に移動しましょう。
「VRHandsFrame.exe」を実行すると初回のみ利用規約への同意を求められます。
利用規約に同意すると自動的にSteamVRが起動し、SteamVRのスタートアップ設定に登録されます。
2回目以降はSteamVRを起動すると自動的に『VRHandsFrame』も起動するため、「VRHandsFrame.exe」を実行する必要はありません。
もし「VRHandsFrame」のフォルダを移動した時は、再び「VRHandsFrame.exe」を実行することでスタートアップの登録場所が更新されます。
『VRHandsFrame』にDeepLのAPIを登録する
SteamVRダッシュボード上でVRHandsFrameのアイコンを選択します。
左側から「翻訳」を選択し、翻訳エンジンを「DeepL」を選択します。
下に出ている「APIキーを設定してください。」をクリックするとデスクトップ内に『VRHandsFrame』の設定画面が表示されます。
設定画面はタスクトレイ内の『VRHandsFrame』アイコンを右クリック→「Preference (設定)」から表示させることも出来ます。
DeepL Freeに取得したDeepLのAPIキーを貼り付け、「OK」をクリックします。
これで『VRHandsFrame』を使用する準備は完了です。
『VRHandsFrame』でゲーム内の英語を翻訳する方法
初期設定では左コントローラーが上・右コントローラが下でフレームを形作ると翻訳モードが起動します。
左コントローラーが上・右コントローラが下にある状態で左右のグリップボタンを押すと、フレームの作成が始まります。
慣れるまでは「左右のグリップボタンを押す」⇒「コントローラをフレーム位置に持っていく」とした方が分かりやすいかもしれません。
フレーム枠が緑色になれば、フレーム枠の大きさを自由に変えられるようになります。
グリップボタンを押したまま、翻訳したい文字がフレーム内に入る大きさに調整します。
大きさが決まったら、グリップボタンは押したまま右トリガーボタンを押すと翻訳を開始します。
（初回のみ）言語パックのインストールが必要
Windowsの言語パック（英語）がインストールされていない場合、インストールを要求する表示が出ます。
左右のグリップボタンを押したまま、右トリガーを押すとインストールが始まります。
デスクトップに「ユーザーアカウント制御」が出ている場合は、許可しないとインストールが始まらないので注意してください。
言語パックのインストールとDeepLのAPIキー登録が正常に完了していれば、日本語訳が表示されます。
読み取れない文字もある
「フレームで囲った範囲を画像として切り取り」→「画像内の文字を翻訳」という処理で翻訳されています。
そのため以下のような場合は正常に読み取れず、翻訳できなかったり、翻訳が間違ったりします。
- 文字と周囲の明明暗差が少なく、文字が認識できない場合
- 文字フォントのデザイン性が高く、文字が誤認される場合（q が 9 で認識されたりする）
（VR-MMORPG「A Township Tale」より）
『VRCT』の導入（デバイスから音声を拾ってリアルタイム翻訳）
マイクを通した音声・スピーカーから聞こえる音声をリアルタイムで翻訳してくれる『VRCT』を導入しましょう。
基本的にはSteam版のVRChat用のソフトですが、デバイスを通った音声を翻訳してくれるため、VRChat以外でも使用することができます。
導入は次の3ステップで行います。
- 『VRCT』をダウンロードする
- 『VRCT』の設定にDeepL APIを入力する
- VRChat内でOSCを有効化する
『VRCT』のダウンロード
『VRCT』はBOOTHにて無料でダウンロードすることができます。
ダウンロードにはPixiv IDが必要のため、持っていない方はPixivに登録しましょう。
【外部リンク】VRCT（チャットボックスで翻訳も送信するツール）
ダウンロードしたzipファイル任意の場所に解凍し、中にあるEXEファイルを実行してインストールしましょう。
インストーラーに表示されるオプションは、VRCTの設定画面から全て変更できるので、インストール時は「次へ」連打でもOKです。
『VRCT』にDeepLのAPIを登録する
インストールが完了し『VRCT』が起動したら、歯車ボタンを押してConfigを表示しましょう。
左から翻訳を表示し、「DeepL 認証キー」に取得したDeepLのAPIキーを貼り付けます。
API Keyを貼り付けたら右上の「×」でConfigを閉じます。
左下にある翻訳エンジンをクリックしし、「DeepL」に変更したら設定は完了です。
VRChatでOSCを有効にする
VRChatを起動し、アクションメニューを表示します。（アクションメニューの表示方法は設定により異なります）
「Option」⇒「OSC」⇒「Enabled」の順で選択し、スイッチが右側になればOSCが有効になっています。
『VRCT』で音声を翻訳する方法
『VRCT』のメイン画面で次の3つを有効にします。
- 翻訳
- 音声認識（マイク）
- 音声認識（スピーカー）
3つにチェックを入れた時点でマイクに喋った言葉の翻訳がChatBoxに、スピーカーに聞こえる音声の翻訳が『VRCT』のログ画面に表示されます。
マイクデバイスを通した言葉がChatBoxに表示されるので、VRChatのマイクをミュートにしても喋った言葉がChatBoxで表示されます。
VRCTのConfigにあるその他 > VRCマイクミュート同期 を有効にすると、VRChatのマイクと連動してくれるようになります。
前述の通りスピーカーに聞こえる音声の翻訳は、デスクトップ上の『VRCT』のログ画面にしか表示されていません。
VRChat上で確認できるよう、デスクトップをオーバーレイ表示しましょう。
SteamVRのコントロールパネルからデスクトップを選択し、下にある「コントローラにドッキング」か「フローティング表示」のいずれかのアイコンをクリックします。
これでVRChatをプレイしながらデスクトップ画面を確認できるようになりました。
（VRChatワールド「Treasure Heist」より）
もしマイク・スピーカーどちらかが翻訳されない場合、『VRCT』で使用するマイク・スピーカーデバイスに誤りが無いか確認しましょう。
『VRCT』で使用するデバイスは、Config > 音声認識にある「マイク（デバイス）」「スピーカー（デバイス）」からそれぞれ変更できます。
マイクアイコン / ヘッドフォンアイコン をクリックすると、デバイスが音声を拾っているかボイスメーターで確認できます
翻訳精度は「音声が上手く拾えるか」次第
翻訳精度ですが、翻訳したい範囲の音声が『VRCT』で上手く拾えた場合はかなり高い精度で翻訳してくれます。
- スピーカー（マイク）音声の区切りの無音時間
- 文字起こしする音声時間の上限
- 保留する単語の上限
の３つを調整し、高い精度で翻訳できる設定を探しましょう。
英語が分かれば楽しめるワールド・ゲーム数が爆増する！
SteamVRのオーバーレイで使える画像翻訳ソフト『VRHandsFrame』と
デバイスから音声を拾ってリアルタイムで翻訳してくれるソフト『VRCT』をご紹介しました！
日本語に対応したVRChatワールドやVRゲームも増えてきていますが、それでも全体数からするとかなり少ないです。
『VRHandsFrame』や『VRCT』といった翻訳ソフトを上手に使って、日本語に非対応のゲームも楽しめるようになりましょう！
もし翻訳ではなく英語を勉強したいならば、VR×AIで英語が勉強できる『スマート・チューター』が楽しくてオススメです。
VRゴーグルを被って勉強するので、自宅に居ながら周りの誘惑に惑わされず集中して英語を勉強することができます！
スマート・チューターについては以下の記事をご確認ください！
おすすめの記事
ASMR音声は「耳で楽しむVR」（無料作品もあります）
＼ バイノーラル録音のASMRで存在を感じよう♪ ／
『ぼっち・ざ・ろっく』後藤ひとり 役 青山吉能さん出演のASMR。
自分だけに話しかけてくれる吐息に耳がゾクゾクします。