✨✨✨✨ 翻訳の魔法です ✨✨✨✨ 🎉 相互翻訳、はじめました。👦⇔👨 もう「自分の言葉だけ」じゃありません。 相手の言葉も、リアルタイムで翻訳します。 🌍 世界中の人と、あなたの言葉で。 海外のお友達と話したい。 でも…… 翻訳サイトを開いて、 コピペして、 チャットへ貼り付けて…… そんな手間を感じたことはありませんか？ そこで── 🎤 話すだけで翻訳 → VRChat Chatboxへ送信！ VRC Misa Translator は、 VRChatで海外の人と自然に会話するためのリアルタイム音声翻訳ツールです。 Whisperによる高精度音声認識と、 ChatGPT・Google翻訳に対応。 さらに v1.13.0では── 🎉 相互翻訳対応（β） 🥽 VRモード搭載 🪟 Overlay表示対応 🎚️ リアルタイム音声レベル調整 🌍 29か国語対応！ 💬 ChatGPT翻訳対応 🚀 GPU対応 Pro版 日本語→日本語に設定すれば、 無言勢の方のチャット入力支援ツールとしても利用できます。 ━━━━━━━━━━━━━━━━━━━━━━ ■ Free版 / Pro版について ━━━━━━━━━━━━━━━━━━━━━━ VRC Misa Translator は、 Free版とPro版の2種類を用意しています。 【Free版】 CPU動作 基本機能すべて利用可能 ChatGPT・Google翻訳対応 【Pro版】 GPU対応Whisper large-v3-turbo対応 オートアップデート 高速音声認識 ※翻訳機能や基本機能は共通です。 ━━━━━━━━━━━━━━━━━━━━━━ ■ 🆕 v1.13.7 アップデート ━━━━━━━━━━━━━━━━━━━━━━ v1.13.7では、相手音声翻訳のセットアップ支援、翻訳処理の停止対策、長文送信、相手音声の表示処理などを中心に改善しました。 特に、相手音声がうまく取得できない環境向けに「相手音声セットアップヘルパー」を追加しました。 Windowsの音声出力確認からVRCMT側の候補確認、VB-CABLE / VoiceMeeterを利用した音声経路の設定まで、トラブル時の確認や設定を行いやすくしています。 また、音声認識結果が空白や記号のみになった場合に翻訳処理が停止することがある問題や、相手音声の途中認識から最終認識へ切り替わる際に、それまで表示されていた内容の一部が消えてしまうことがある問題を改善しました。 主な更新： ・「相手音声セットアップヘルパー」を追加 ・メイン画面の相手音声欄に「HELP」ボタンを追加 ・Windowsの音量ミキサーや音声出力先を確認しやすく改善 ・VRCMT側の相手音声候補を再読み込みして確認できる機能を追加 ・相手音声候補リストを縦表示＋スクロール対応に改善 ・相手音声取得に不要なInput系候補を整理 ・VB-CABLEを使った相手音声取得の設定案内を追加 ・「CABLE Output → プロパティ → 聴く → このデバイスを聴く」の設定手順を案内 ・VoiceMeeterを使った音声ルーティングの設定案内を追加 ・VoiceMeeter専用の手順画面を追加 ・相手音声セットアップヘルパーを親ウィンドウ上に表示するよう改善 ・空白、記号のみ、「...」「…」などの実質空の音声認識結果を安全にスキップするよう改善 ・翻訳結果が空または取得できなかった場合でも、翻訳処理全体が停止しないよう改善 ・音声認識や翻訳をスキップした理由を診断ログへ追加 ・相手音声の途中認識（partial）から最終認識（final）への表示処理を改善 ・最終認識に以前の内容が含まれていない場合、それまでの途中認識を不用意に消さないよう改善 ・途中認識と最終認識で重複する内容の処理を改善 ・長文の自動分割送信をさらに改善 ・分割送信中に次の翻訳が発生した場合も、未送信の文章を破棄せず順番に送信するよう改善 ・歌詞などで短いフレーズが繰り返される場合の判定を改善 ・正常な繰り返し表現が不要な認識結果としてスキップされにくいよう改善 ・その他、相手音声翻訳と翻訳処理の安定性を改善 補足： 相手音声はWindowsやVRChatの音声出力環境によって、VRCMTから直接取得できる候補が表示されない場合があります。 その場合は、相手音声欄の「HELP」から「相手音声セットアップヘルパー」を開いて確認してください。 通常の音声出力設定で解決できない場合は、VB-CABLEまたはVoiceMeeterを利用する方法も案内しています。 AMD GPU / Vulkanを利用した音声認識高速化については、引き続き検証中です。 AMD Radeon RX 7900 XTX環境では、whisper.cppのVulkan backendを利用してAMD GPUで音声認識処理を実行できることを確認できました。 ただし、まだ正式機能として通常版には含めていません。モデルや連続実行時の安定性などを引き続き検証していきます。 今回の不具合調査でも、国内・海外のユーザーさんからログや詳しい再現状況をご提供いただきました。 検証やフィードバックへのご協力、本当にありがとうございます✨ コンゴトモヨロシク！🐐✨ ━━━━━━━━━━━━━━━━━━━━━━ ■ 🆕 v1.13.6 アップデート ━━━━━━━━━━━━━━━━━━━━━━ v1.13.6では、日本語音声認識、翻訳プレビュー、VRモード、長文送信、通常ログ/診断ログまわりを中心に改善しました。 日本語入力向けに Kotoba-Whisper を試験的に追加し、日本語音声の認識精度向上を目指しました。 また、VR環境で翻訳プレビューが別ウィンドウとして表示されにくい問題を避けるため、翻訳プレビューをメイン画面内に表示する方式へ変更しています。 主な更新： ・日本語入力向けに Kotoba-Whisper を追加 ・Kotoba-Whisper用のモデル管理を追加 ・日本語入力時の音声認識精度を改善 ・モデル準備中 / 初回ダウンロード中の表示を改善 ・翻訳プレビューをメイン画面内に表示する方式へ変更 ・VRモードで翻訳プレビューを使いやすく改善 ・VRモードUIの表示と配置を調整 ・翻訳プレビューの送信 / キャンセル処理を改善 ・翻訳プレビュー中のChatbox履歴保持を改善 ・同じ文章をプレビュー送信した場合の送信判定を改善 ・長文翻訳の自動分割送信を追加 ・長い翻訳文をVRChat Chatboxへ送る際に分割して送信できるように改善 ・Chatbox 3行表示時の通常ログを整理 ・VRChat側には複数行を送信しつつ、通常ログでは最新の送信内容を確認しやすく改善 ・通常ログと診断ログを整理 ・録音開始、録音終了、Whisper処理、スキップ理由、例外などを追跡する録音セッション診断ログを追加 ・「録音開始」のあとに止まったように見える問題を調査しやすく改善 ・相手音声入力の話し方設定を追加 ・ゆっくり話す相手や歌に近い音声の区切り判定を改善 ・英語の自然文スキップ判定をさらに改善 ・モデル読み込み完了前の必要モデル準備を改善 ・通常利用時に見えるログを分かりやすく整理 ・その他、安定性と細かな表示を改善 補足： AMD GPU / DirectML / Vulkan などを使った高速化については、現在も検証中です。 今回の通常版にはまだ正式機能としては含めていませんが、今後のアップデート候補として引き続き調査しています。 フィードバックや検証へのご協力、いつもありがとうございます✨ コンゴトモヨロシク！🐐✨ ━━━━━━━━━━━━━━━━━━━━━━ ■ 🆕 v1.13.5 アップデート ━━━━━━━━━━━━━━━━━━━━━━ v1.13.5では、更新通知、Pro Downloader、相手音声入力、英語認識フィルター、VRChat Chatbox送信まわりを中心に改善しました。 特に、アップデート時の安全性を高めるため、自動更新ではなく「通知してユーザーが手動で更新する」方式へ調整しています。 また、相手音声入力でデスクトップ音声を選びやすくし、環境ごとの取得元をログで確認しやすくしました。 主な更新： ・更新通知機能の改善 ・自動更新ではなく手動更新案内方式へ変更 ・Pro Downloaderの安定性改善 ・ダウンロード失敗時の案内改善 ・インストール中の残プロセス検出を強化 ・相手音声入力にデスクトップ音声候補を追加 ・Desktop Audio（Auto Select）の取得元診断ログを追加 ・Windows既定出力 / soundcard / WASAPI 周りの診断ログを追加 ・AG06 / AG03 / Voicemeeter / Virtual Desktop Audio などの環境確認をしやすく改善 ・英語の自然な長文が誤ってスキップされる問題を改善 ・短い英語・固有名詞・略語が翻訳されずスキップされる問題を改善 ・VRChat Chatbox送信時の改行処理を改善 ・翻訳されていない原文が誤ってChatboxに送信される問題への追加対策 ・OpenAI API Keyガイドを改善 ・ChatGPT翻訳エンジン設定まわりを整理 ・セキュリティソフト誤検知リスク低減のための調整 ・その他、安定性と診断ログを改善 フィードバックをお寄せいただきありがとうございます✨ ━━━━━━━━━━━━━━━━━━━━━━ ■ 🆕 v1.13.4 アップデート ━━━━━━━━━━━━━━━━━━━━━━ v1.13.4では、v1.13.0以降にいただいたフィードバックをもとに、VRモード、音声キャリブレーション、相手音声入力、英語長文認識、Filipino / Tagalog対応、辞書編集、OSC送信安全性などを改善しました。 また、音声キャリブレーションの操作手順を見直し、翻訳中に開始した場合の警告表示や、読み上げ文を確認してから録音を開始できる方式に変更しています。 主な更新： ・VRモードUI修正 ・VRモード時のウィンドウ縮小対応 ・Windows表示スケール/DPI環境での文字重なり・見切れ改善 ・子ウィンドウ非モーダル化 ・音声キャリブレーションの操作改善 ・読み上げ測定を「開始」→「完了」方式に変更 ・認識開始レベルのズレ修正 ・相手音声入力にデスクトップ音声の手動候補を追加 ・デスクトップ音声の実取得元ログ表示 ・AG06/AG03などミキサー環境向けの注意ログ追加 ・英語長文が誤ってスキップされる問題を修正 ・Filipino / Tagalog の言語コード修正 ・翻訳されず母国語のまま送信される問題への追加対策 ・VRモード中の翻訳プレビュー無効化 ・辞書/リスト編集とImport・Export改善 ・My Terms Dictionary追加 ・ログ選択中の表示更新停止 ・Proライセンス受け取り方法の説明追加 ・セキュリティソフト誤検知リスク低減 フィードバックをお寄せいただきありがとうございます✨ ━━━━━━━━━━━━━━━━━━━━━━ ■ 🆕 v1.13.2 アップデート ━━━━━━━━━━━━━━━━━━━━━━ v1.13.2では、VRモードのUI崩れ修正、辞書・リスト編集機能の改善、相手音声認識の診断ログ追加、ログからのブラックリスト登録補助、セキュリティソフト誤検知リスク低減などを行いました。 また、詳細設定などの子ウィンドウを非モーダル化し、VR内表示中でも操作不能になりにくいよう改善しています。 主な更新： ・VRモードUI修正 ・子ウィンドウ非モーダル化 ・音声キャリブレーション修正 ・辞書/リストのImport・Export対応 ・マイ用語辞典追加 ・ログ選択中の表示更新停止 ・ログからブラックリスト/終端幻聴トリムへ追加しやすく改善 ・相手音声認識の診断ログ追加 ・セキュリティソフト誤検知対策 フィードバックお寄せいただきありがとうございます✨ ━━━━━━━━━━━━━━━━━━━━━━ ■ 🆕 v1.13.0 アップデート ━━━━━━━━━━━━━━━━━━━━━━ 👦⇔👨 相互翻訳（β）搭載 あなたの声だけでなく、 相手の声もリアルタイムで認識・翻訳できるようになりました。 海外フレンドとの会話が、より自然になりました。 ※デスクトップ音声を認識するため、ワールド音声や動画・音楽なども認識対象になります。 🎤 音声認識をさらに快適に WebRTC VAD搭載 認識開始レベルをリアルタイム調整 発話終了判定を改善 繰り返し認識・幻聴対策を強化 より自然で快適な音声認識になりました。 🥽 VRモード搭載 VR中でも操作しやすい、 コンパクトな専用UIを追加しました。 🪟 Overlay機能強化 Desktop+ や XSOverlay 上で、 原文 翻訳文 相手音声翻訳 をリアルタイム表示できます。 🎚️ 新しい音声レベル調整UI 入力レベルをリアルタイム表示。 Canvasゲージから、 認識開始レベルを直感的に調整できます。 📝 安定性・使いやすさ向上 日別ログ保存 設定ファイル保護（Atomic Save） 多言語ログ表示 UI改善 詳細設定整理 相手音声認識設定追加 より安心して利用できるようになりました。 🌍 29か国語対応 世界中のユーザーとの交流をサポートします。 🚀 Pro版 GPU高速音声認識 large-v3-turbo対応 オートアップデート 高性能な環境を活かしたい方におすすめです。 💖 最後に VRC Misa Translatorは、 「翻訳するためのソフト」ではなく、 **「世界中の人と話すためのソフト」**を目指して開発しています。 言葉の壁を越えて、 新しい出会いや交流を楽しんでいただけたら嬉しいです。