ミシェラ フェイストラッキング / Michella Face Tracking ★ NEW: mFT 2.0 ネイティブ (ベータ) / mFT 2.0 native (beta) VRChat 本体の FT で動作、顔の同期 0 bit (合計 74/256)、従来版も同梱。 On VRChat's built-in FT: the face costs 0 bits (74/256). Classic included. 要 / Needs: VRChat open beta, SDK 3.10.6-beta.3+, VRCFT. ミシェラ (CEM DOLLS) 用のフェイストラッキング。自作テンプレート、VRChat SDK だけで動きます。 Face tracking for Michella by CEM DOLLS. My own template, VRChat SDK only. ■ ミシェラ本体は含まれません / Michella is NOT included ■ 購入前に無料レポート Michella_Stats をどうぞ (10言語) / Read the free Michella_Stats report before buying (10 languages) 日本語 / English / 中文 / 한국어 / Русский / Español / Français / Bahasa Melayu / हिन्दी / العربية ■ 不具合・質問 / Bugs, questions: Discord mustar22 / mustar4231@gmail.com Michella / オリジナル3Dモデル『ミシェラ』 by CEM DOLLS: https://booth.pm/en/items/8916626 デモ動画 / Demo video: https://youtu.be/fPGB_iy_bqk 制作を快諾してくださった CEM DOLLS さまに感謝します。/ Thanks to CEM DOLLS for the green light. ~~~ ■ 必要なもの / Needs フェイストラッキングに必要なのは VRChat SDK (Avatars 3.x) だけ。VRCFT テンプレートは不要です。あとは VRCFT (Unified Expressions v2) を送れるフェイストラッキング機器。 For the face tracking, the VRChat SDK (Avatars 3.x) is all you need. No VRCFT template. Plus a face tracker that sends VRCFT Unified Expressions v2. ■ 中身 / What you get ・フェイストラッキング用シェイプ63個: 彼女の顔のために造形した30個 + 彼女のシェイプを組み合わせたミックス23個 + 左右分割10個。 ・63 face tracking blendshapes: 30 sculpted for her face + 23 mixes built from her own shapes + 10 left/right halves. ・視線は本物のアイボーン。コピー側で目の回転軸を置き直すので、瞳は左右に約12 mm、上下に約10 mm 動き、白目が目からはみ出しません。 ・Gaze on her real eye bones. The patch re-seats the eye pivots on your copy, so the iris travels about 12 mm sideways and 10 mm up or down and the eye white never leaves the eye. ・目が表情に反応: 笑顔で目が笑い、眉を下げるとにらみ、下を見るとまぶたが下がります。 ・The eyes react to your face: a smile smiles in the eyes, lowered brows glare, looking down lowers the lids. ・舌10ポーズ。彼女の小さな口に合わせて細く整えた完成形で、混ぜても崩れません。 ・10 tongue poses, each a complete pose slimmed to fit her small mouth, so blends never fall apart. ・ストップモーション: 顔がポーズを保ち1秒に8回切り替わるアニメ風。0 bit。 ・Stop Motion: the face holds a pose, then jumps 8 times a second. 0 bits. ・声で動く口: 声の大きさに合わせてパキッと切り替わり、トラッキングの口に重なります。口のトラッキングを切れば声だけで口が動きます。 ・Voice-driven mouth: snaps between poses, sized by how loud you are, on top of the tracked mouth. With Lip Tracking off, the voice is the whole mouth. ・エモート11種 (猫目、うるうる、キラキラ、涙、青ざめ、白目、ショック、ほっぺ、照れ、ぐるぐる、ハート)。メニューで1つずつON、初期OFF。入れるものはパッチャーで選べます (1個 1 bit)。 ・11 emotes (cat eyes, teary eyes, sparkle, tears, blue face, white eyes, shock, hoppe, blush, dizzy, hearts). Each one its own menu toggle, off by default. Tick the ones you want in the patcher, 1 bit each. ・他の人から見ると目に小さな自然な揺れ (サッカード)。bit消費ゼロ。 ・Living eyes: viewers see tiny natural eye flicks. Costs 0 bits. ・表情キープ (全員に見える)、感度ダイヤル7種、左手首のパネル用ボタン。 ・Freeze (everyone sees it), 7 sensitivity dials, a wrist button for the panel. ・ハンドジェスチャーの表情は初期OFF (メニューでON)。トラッキング中の顔に重なりません。 ・Hand gesture expressions start off (menu toggle), so they never pile on your tracked face. ・パッチャーで機能ごとにON/OFF、bit数もその場で表示。 ・The patcher ticks each feature on or off and shows its bit cost live. ■ 測定 / Measured 彼女の FX に上乗せされるアニメーター負荷 (1フレーム、Unity で計測。彼女自身の FX は約 0.10 ms): Animator cost added on top of her own FX, per frame, measured in Unity (her own FX is about 0.10 ms): ・フル / Full: 自分 / You +0.80 ms, 他の人から見て / Viewers +0.75 ms ・ライト / Light: 自分 / You +0.33 ms, 他の人から見て / Viewers +0.30 ms ・参考 Adjerry テンプレート (同じ方法、Lunary で計測) / For reference, Adjerry's template, same method, measured on Lunary: +0.47 ms / +0.65 ms ・数字はすべて自己申告です :') / All of these are self-reported, the irony is real :') 同期 / Sync bits: フル / Full 219 / 256, ライト / Light 187 / 256. 空きはフルで37 bit、ライトで69 bit。他のギミックに使えます。 Full leaves 37 bits free, Light leaves 69, for your other gimmicks. ■ なぜ自作? / Why my own template? ・スムージングが他の人にも同期。選んだ設定 (オフ / 5 / 10 / 15 / 20 / 30 ms / Stop Motion) で、見ている人にも同じに映ります。使うのは3 bitだけ。 ・Your smoothing is synced. Whatever you pick (Off / 5 / 10 / 15 / 20 / 30 ms / Stop Motion), viewers see you the same way. Costs 3 bits. ・フレームレートに左右されないスムージング。72 fps でも 120 fps でも効き方は同じ。 ・Frame-rate exact smoothing. Feels the same at 72 fps and at 120. ・他の人側は届くパケットの間隔を実測して補間。カクつきを抑えます。 ・Viewers glide between packets timed to the measured network rate, so less stepping. ・依存ゼロ、非破壊。パッチは _FT のコピーに当て、元のアバターは非表示でそのまま。パッチ時に組み込むのでアップロードも速い。 ・Zero dependencies, non-destructive. The patch goes on an _FT copy, the original stays hidden and untouched. Built in when you patch, so uploads are quick. ・ワールド内キャリブレーションとデバッグパネル (生の値と補正後、視線マップ、FPS、同期Hz) を内蔵。 ・Built in: in-world calibration, and a debug panel with raw vs smoothed values, a gaze map, FPS and sync rate. ■ 弱点 / Cons ・ミシェラ専用。PC で確認。Quest は未検証。 ・Michella only. Tested on PC. Quest is untested. ・彼女の「Face」表情メニューは _FT コピーから外れます (顔はフェイストラッキングが担当)。Backlit はそのまま。 ・Her "Face" expression menu is removed on the _FT copy, tracking owns the face. Backlit stays. ・視線トラッキング中は彼女の自動まばたきが止まります (まばたきはトラッカーから)。視線トラッキングを切ると戻ります。 ・Her own auto-blink pauses while Eye Tracking is on (blinks come from your tracker). It comes back when Eye Tracking is off. ・コピー側のリップシンクは私のレイヤーが動かします。アンインストールで彼女の設定に戻ります。 ・Lip sync on the copy runs through my layer. Uninstall puts her own setting back. ・Tune の値はアバターのリセットで戻ります。 ・Tune dials reset when the avatar resets. ・対策を開発中。/ Working on it (tried baking at upload, live reads). ・ヒンディー語とアラビア語はキャリブパネルのみ。エモート名、Stop Motion、FT anime visemes はどの言語でも英語です。 ・Hindi and Arabic: calibration panel only. Emote names, Stop Motion and FT anime visemes are English in every language. ■ 導入 / Install 1. unitypackage を入れる / Import the unitypackage 2. Tools > mustar > Michella Face Tracking Patcher でアバターを選んで「パッチを当てる」/ pick your avatar, press Patch ネイティブ / Native: 「mFT 2.0: VRChat native face tracking (beta)」にチェック / tick it 3. いつも通りアップロード / Upload as usual 元のアバターをコピーして、名前の末尾に _FT が付いたコピーにパッチします。/ It patches a copy named <name>_FT, the original is hidden. ~~~ Michella by CEM DOLLS. Face tracking by mustar. 非公式の二次創作アドオンです。/ Unofficial third-party add-on.