FaceTrackingなど
閉じる
閉じる

新しい記事を投稿しました。シェアして読者に伝えましょう

×

FaceTrackingなど

2018-01-30 23:06
  • 2
FaceTracking技術がだいぶ前から出てきていますが、あまり活用されていない感じでしょうか?
FaceRigとか結構上手にトラッキングできていて、面白かったのを覚えています。

というわけで、お遊び的、テスト的な何かを作りました。

Hitogata alphaダウンロードリンク
https://app.box.com/s/th6qxr4auo9o3mood79d5e8hr6w5ymud

(私的にBOX使うの初めてなのでダウンロードできないとかあったらご報告ください。30MBぐらいありますが、気のせいです。)

DirectX11対応WindowsPCと、Webカメラがあれば動きます。





操作は単純で、メニューの「Debug」からPMXモデルを開いて、右上の「FaceTracker」をクリックすると、自分の口パクに合わせてモデルが動きます。
口パクモーフはキャプチャしてVMDに保存することもできます。

このFaceTrackerは、Jason Saragihさんが開発されたもので、商用利用でなければ無料で使うことができるものです。

FaceTracker
https://github.com/kylemcdonald/FaceTracker

横を向いたりするとトラッキングが外れてしまったりしますが、結構いい感じにトラックしてくれます。
この口の形状をざっくり見て、「あ」「い」「う」のモーフに置き換えることでPMXモデルに口パクさせてます。
まだぜんぜん調整できてないですが、口パク作るの面倒な人には今のものでもいいかもしれません。

今回は本当にちょっとやってみただけですが、結構面白かったので公開してみました。
Webカメラが手元にあって、興味ある方は触ってみてください。

よろしくお願いします。



ちなみに、トラッキングが外れてたまに何もない壁に顔がトラッキングされるのは何か霊的なものがいるってことですかね?
広告
×
ソフトを導入してみました。
しっかりリップトラッキングできてました!
あと、やっぱり壁に霊がいましたww
18ヶ月前
×
これは、凄い!!
モデルはMikuV4X_Digitrevxで動かしました。
口が連動して動きました。
目と眉も動くと更に表現力がましますね。
バージョンUPに期待!!
18ヶ月前
コメントを書く
コメントをするには、
ログインして下さい。