malaybaku / VMagicMirror

VRM Software for Windows to move avatar with minimal devices.

https://malaybaku.github.io/VMagicMirror/

MIT License

468 stars 38 forks source link

iFacialMocap連動機能の格上げ #341

Closed malaybaku closed 4 years ago

malaybaku commented 4 years ago

概要

hinzkaさんがやってる、ARFaceTracking to BlendShapeProxyの処理をユーザーがめんどくさくないように適用したい。

要件

VRoidモデルでとてもラクに使える
VRoid以外のモデルでも頑張れば使える
位置づけとしては、「Ex TrackerでリップシンクもEx Trackerベース」のケースを更に強化したオプションにする。

対応方針

Ex Trackerに「厳密なフェイストラッキング機能」みたいなオプションをつけて、以下4つのオプションを選べるようにする。

なし(※従来挙動)
VRoidデフォルト(※リファレンスをあらかじめ用意してVMagicMirrorの中で持っておく)
モデル自身の設定を使用
他のVRMを参照

ただし4つ目は工数のわりにバリューが小さそうなので、実装が大変だったら省く。

また、この機能のうち「モデル自身」とか「他のVRM」を選ぶとセットアップが非常に大変になる(52個のBlendShapeClipを定義する必要がある)ので、ドキュメントをがっちり書く。

malaybaku commented 4 years ago

353 で導入。残件としてdocumentのスクショがまだ撮れてないが、これはリリース直前で体裁整えるので、このissue自体は閉じます