【開発終了】TMARelay：VRChatのデスクトップモード/スマホ版で手を動かす奴
- Digital0 JPY
【開発終了】について VRChatオープンベータに来た現時点ではVRC+専用のWebカメラトラッキングが腕、指、上半身の動き、表情のトラッキングが可能でとても良い感じなので、TMARelayではどうやっても上回れないため開発を終了します。 (VRC+じゃない方が使いたいかもしれないので当面置いておきます） 最新バージョンv0.6.0W はこちらから（指も動かせます） https://tbbsakura.booth.pm/items/6088708 【2025/10 Unityアプリケーションの脆弱性対応について】 2025/10に発見されたUnityアプリケーションの脆弱性に関して、パッチファイルの提供で対応しています。UnityPlayer-patched-dll_TMARelay0.4.0MA.zipをダウンロードして、中の UnityPlayer.dll を、TMARelay.exe と同じフォルダに入れて、元のファイルを上書きしてください。 開発終了につき、フルセットの再配布の予定は現状ありません。また、詳細な動作テストは行っておりません。 なお、当該脆弱性は TMARelay の保存場所を特定した上で不正パラメーターをつけて起動しないと悪用できないものであり、既にPCを勝手に操作される状況でもなければ悪用される可能性は低いと思われます。（プラットフォームで配布しているゲーム等とは異なるため） 以下は古い説明です。 腕にトラッカーつけて/あるいはフリーソフト+WebCamのカメラトラッキングで、VRChatのデスクトップモードでHumanoidアバターの腕を動かせるようにするWindowsソフトです。 Webcam用のセットアップをかんたんにするために作ったパックのほうに機能を統合しているので、こちらは旧バージョン置き場になります。
【2025/10 Unityアプリケーションの脆弱性対応について】
（重要なので2回書いています） 2025/10に発見されたUnityアプリケーションの脆弱性に関して、パッチファイルの提供で対応しています。UnityPlayer-patched-dll_TMARelay0.4.0MA.zipをダウンロードして、中の UnityPlayer.dll を、TMARelay.exe と同じフォルダに入れて、元のファイルを上書きしてください。 開発終了につき、フルセットの再配布の予定は現状ありません。また、詳細な動作テストは行っておりません。 なお、当該脆弱性は TMARelay の保存場所を特定した上で不正パラメーターをつけて起動しないと悪用できないものであり、既にPCを勝手に操作される状況でもなければ悪用される可能性は低いと思われます。（プラットフォームで配布しているゲーム等とは異なるため）
旧説明
腕にトラッカーつけて/あるいはフリーソフト+WebCamのカメラトラッキングで、VRChatのデスクトップモードでHumanoidアバターの腕を動かせるようにするWindowsソフトを作りました！ わたしの場合、SlimeVRトラッカー（オープンソースでDIYできるやつ）を4つ(Lower Arm/Upper Armの左右)つけて動画のように動かせています。 VMC ProtocolでBoneのモーションを送信できるものでも使えます（VRigUnityとか、TDPTとか、VSeeFaceとか） PC上でこのアプリを使いOSCの送信先をandroidスマホに設定して、スマホ版で手を動かすこともできます。
仕組み
VMC Protocolで姿勢の情報を受け取りVRMモデルに反映した後、 ボーンの曲がり具合（muscle値）をVRChatにOSCで送ってExpression Parameterに設定して、 VRChat側では Animation で腕を曲げています。 SlimeVRは、トラッキング/モーション情報をVMC Protocolで送出できるので、トラッカーで検出した動きをデスクトップモードのアバターに反映できています。 (Tracking info → Muscle(Motion)→ Animation とつなぐので、 TMA Relay という名前になっています）
SlimeVRでの使い方
SlimeVRトラッカーでの使い方は TMARelay_v0.2.MA.ZIP に入っている、 TMARelay_ユーザー向け説明β.txt を参照してください。 仕組みを見たい方は、github https://github.com/tbbsakura/TMARelayBuild のほうを見てください。
スマホをトラッカーがわりにする使い方
owoTrack というスマホ用アプリを入れるとスマホを SlimeVR用トラッカーとして使用できます（動画のとおり） これの設定方法の解説はブログのほうに書きました。 https://tbbsakura.fc2.net/blog-entry-19.html
ライセンス
TMARelay は MITライセンスでソースコード等公開しています。 また、他者著作物であるMITライセンスのソフトウェアを利用しています。 （詳細は https://github.com/tbbsakura/TMARelayBuild/blob/main/Assets/SakuraShop_tbb/TMARelay/LICENCES/MIT_License_Softwares.txt )
更新履歴
2023/8/31 v0.1 公開 2023/8/31 v0.1b 読み込んだVRMの目の表示を改善（致命的ではないので更新しなくても大丈夫です） 2023/9/1 v0.1c ・Standard や Unlit シェーダーを含むVRM のロードに失敗するのを修正しました。 ・ステータスメッセージの種類をふやしました。 ・SpringBoneを無効にするようにしました。 （直したつもりの目のバグ、まだあるかも？） 2023/9/5 v0.2.0 目のボーン情報を受信しないオプションをつけた（目がおかしいのはそのせいだったので） 送信するmuscle値を増やしたり ExParam名をカスタマイズできる Expert modeを実装（あまり役に立たないことが判明しています…） 2024/1/6 v0.2.0.MA Modular Avatarで簡単にアバターセットアップできるプレハブ・スクリプトを用意しました。 2024/1/15 v0.2.1.MA Modular Avatarセットアップが、Gesture Layerがデフォルトのときうまくいかないのを修正 2024/9/8 Buildについては github 公開へ変更 2024/9/11 v0.3.0 （アバター側は0.2.1と変化なし） ・OpenVRMボタン ・前回読み込んだVRMを記憶して次回初回時にそれを読むよう変更 ・マウスホイールでの拡大縮小 ・Ctrl/Shift+左ドラッグでの視界移動に対応 ・ウィンドウの拡大縮小対応 2024/10/21 v0.4.0 ・VRM1のロードに対応 (ただし、使うVRMの0/1は他のアプリと統一してください) 2024/12/08 v0.6.0W VRM読み込み、VMCP受信等をかんたんパックに統合・無印TMARelayの更新停止
Build版について
現在はソースコードはgithub にて公開しています。（新版公開から少し遅れる場合があります） https://github.com/tbbsakura/TMARelayBuild 一部のプロジェクトに必要なファイルが含まれていないことが過去にあったようです。お手数おかけしてすみません。