Gスカの素材やPCネタブログ

ゆっくりキャラボイス設定記事、怖い話動画数800以上!とか、マイクラネタ(MOD、役立ち情報、データ解析)や、動画に使える自作MMD素材の配布とか記事にしてます。なお、私の記事を読んで何かをやりたくなった!という場合は自己責任でお願いします。

【MMD】モーショントレースもAI時代に!?

AIがどんどんと進化していて凄い事になってる日々ですが、今回見つけたのは前から「こんなのあったらいいな」というのを見つけてしまいました。

既にAI関連を調べてる人たちなら知ってるものだと思います。

 

今回紹介するのはこちら

動画上のキャラの動きをAIでモーショントレース!

というものです。

 

今までは人が動画のトレースをMMD等で頑張ってやっていたものだったのですが、下記サイトを使うとAIが勝手にやってくれます。

その中でいくつかあるのでサイト名を記述します。

 

DeepMotion

Metive

Plask Motion

Rokoko Vision

 

今回紹介するのはDeepMotionというサイト。

portal.deepmotion.com

 

サイトの見た目はこんな感じ

Chromeで日本語翻訳してある状態なので、翻訳してないと英語状態です。

使い方は簡単。

まずは作成する(翻訳してないとCreate)を押します。

 

このような見た目のページになるので、中央にあるビデオを追加に動画をドロップするかクリックしてファイルを選びます。

この時ファイル名が英語じゃないとエラーが出ます。

 

 

動画を選んだ後しばらくするとこんなポップアップが出ます。

もしかしたら有料版なら出ないかもしれませんが、このように出た場合はビデオのダウンサンプルを押します。

 

取り込む位置を決めます。

決まったら右下の保存をクリック。

 

問題無かったら下にあるアニメーションを作成するをクリック。

右側の3Dモデルではモデルを選ぶ事が出来ますので、キャラが男の場合等変更したい場合は鉛筆マークをクリック。

 

 

色々と出てますが、これでよかったら右下のアニメーションを作成するをクリック。

 

ステータスというメーターが進んでいくのでしばらく待つ。

 

無事に終わったら下にあるダウンロードを押します。

 

ダウンロード出来るファイルはBVH、FBX、GLBとあるので好きなものを選びましょう。

特に無かったらBVHでいいんじゃないでしょうか?

 

これであとはBlenderでVMDに変換してもいいですし、BVHをVMDに変換するツールを使ってもいいです。

ちなみにこのようなツールもあります。

booth.pm

 

とまあここまで紹介はしたのですが、どっちみちBlenderを通さないとダメかもしれません(^^;

ちなみに私はツールを使わずにBlenderでやろうとしたのですが、BlenderMMD_toolsがうまく認識してくれず、pmxファイルを読み込む事が出来ませんでした。

アドオンでは認識してくれてるんですけどね(^^;

たぶんBlenderのバージョンによる影響かもしれません。

試したバージョン 2.7.8、3.6.14

 

もっとするとさらに凄いAIやツールが出てくると思いますので、これからの時代は自分で動く動画を撮影(もしくはAIで動かす)、それをこれらのモーショントレースAIにポイして簡単にMMDモーションが作れる!という風になるでしょう。

 

今後に期待です(≧∇≦)