• Hitogata alpha4

    2018-02-19 02:5215時間前9
    Hitogata alpha4 を公開しました。

    Hitogata alpha4
    https://app.box.com/s/th6qxr4auo9o3mood79d5e8hr6w5ymud

    機能追加:
    • 動画ファイルからFaceTrackingする機能を追加
    • マイク入力からリアルタイムに音圧を拾って「あ」モーフさせる機能を追加
    • オーディオファイルから音圧を拾って「あ」モーフさせる機能を追加
    • 部屋にシーンエフェクトをかけられるようにした
    • そのほか細々修正
    (注意) DockLayout.xmlを引き続き使用している方は、表示メニューから「カメラ」を表示させてください。

    今回見た目あまり機能追加されていませんが、内部では色々大変でした。
    シーンエフェクトのサンプルとして、ルミナス部屋を追加しています。
    また気づいた方は少ないと思いますが、広い床ではサンプルとしてWorkingFloorが動いてます。
    これで一応エフェクトシステムが動作するようになりました。
    また動画やマイク入力など、FaceTracking機能としても増えました。

    使った感想や不具合報告など、ご報告いただけると助かります&うれしいです。
    (不具合報告はメールにてお願いします。)

    よろしくお願いします。



  • 広告
  • Hitogata alpha3公開

    2018-02-09 23:5287
    (2018/2/11追記)
    KinectSDKが入っていないと動かない不具合があったので修正しました。
    alpha 3.2を公開していますので、こちらを使用してください。
    -----------------------------------

    Hitogata alpha3 を公開しました。

    https://app.box.com/s/th6qxr4auo9o3mood79d5e8hr6w5ymud

    色々機能を追加して、多少使えるようになったのではと思います。

    機能追加:
    • OpenFaceによる顔認識動作更新、上半身~頭の動作をより反映できるようにした
    • モーション保存機能(引き続き)
    • 動き平滑化
    • 物理演算追加
    • 視線をカメラに向くよう変更
    • 画面サイズ調整機能、別ウィンドウ機能追加
    • ジェスチャー機能追加
    • ジェスチャーにエフェクト使用可能に
    • 部屋にエフェクト使用可能に
    • 笑みモーフを固定化できるようにした
    • 3つのカメラ機能追加
    • ウィンドウ位置を保存するようにした



    今回の修正で、頭の動きが良く反映され、また平滑化によりモデルの動きがかなり滑らかになりました。ジェスチャー機能も追加し、エフェクトも使えるようにしています。
    部屋(背景)にもエフェクトが使えたりと、色々できるようにしました。

    VTuberごっこしたり、モーションや口パクをVMDに落としたりと、この状態でも色々使えるのではないかと思っています。

    もうちょっとデータを充実させたり改良したら、ベータ版として公開して動画でもつくろうかなと思っています(モチベーションが維持できれば)。

    (追記)
    不具合報告等については、下サイトに記載のメールアドレスにお願いします。
    https://sites.google.com/site/mikumikumoving/
    こちらでは管理や返信が難しくなるためよろしくお願いいたします。

    よろしくお願いします。


  • FaceTrackingその2

    2018-02-04 14:559
    懲りずにFaceTrackingです。

    Hitogata
    https://app.box.com/s/th6qxr4auo9o3mood79d5e8hr6w5ymud

    前回はFaceTrackerというソフトを使用しましたが、今回はOpenFaceというソフトに変更しています。前よりも重たいですが、顔の向きや視線も取れるようになりました。
    (モデルにうまく反映できるかはまた別問題)




    またモデル同梱とし、PMXファイルは読み込めないようにしています。
    モデルは私が作ったけものフレンズ関連しかありませんので悪しからずお願いします。

    これで簡単なバーチャルユーチューバーごっこができるくらいにはなったのではと思います。
    まだ機能があまり実装されていませんが、動かすぶんには問題ないかと思います。

    トラッキング結果をモデルに反映するところは、まだまだ改善の余地ありです。
    とりあえず機能実装優先しています。

    前回と同様、DirectX11対応のWindowsPCとWebカメラがあれば動きます。
    ちなみにWebカメラだけでなく、Kinect v1のカメラでも動くようにしました。

    よろしくお願いします。