お金が無くても３D。
トラッキングアプリ
VMagicMirror、3tene、Hitogata、Luppet、FaceRig、などなど。3Dモデルデータ作成
VRoid Studio、セシル変身アプリ、Vカツ、などなど。VMagicMirror
https://booth.pm/ja/items/1272298
キーボード、ゲームパッドなど演者の操作を真似してくれます。
WEBカメラだけで手のトラッキングが出来るようになりました。すごい。
キーボード、ゲームパッドなど演者の操作を真似してくれます。
WEBカメラだけで手のトラッキングが出来るようになりました。すごい。
#VMagicMirror— 獏星(ばくすたー) / Megumi Baxter (@baku_dreameater) March 13, 2020
ウェブカメラだけでハンドトラッキングするシリーズの続き、グーチョキパー検出です。
原理は最初の動画で紹介済みで、
・指を立てた本数に応じて肌色のエリアに凹凸が生まれる(左の動画でピンクの部分)
・その個数から指の本数を推定してグーチョキパーに変換
というアプローチです pic.twitter.com/NnMHC9F3zA
表情を柔らかく調整して無表情を改善
笑顔を少しブレンドすると表情が柔らかくなります。
VRoidStudio書き出しのままのアバターで効果的です。
クロマキー無しで透過合成
VMagicMirrorで「背景を透過」、OBSのゲームソースで「透過を許可」するとクロマキー合成の必要がありません。
「（透過中）キャラ付近をつかんでドラッグ」のチェックが入っていると画面クリックでアバターが画面最前面に出てきてしまいます。
これは、グリーンバックモードで最小化してから背景を透過すると回避できます。
マルチモニタ環境でプレビュー用モニタにアバターを置いておくのがベターかも。
ゲームパッドのズレを修正
ゲームパッドとアバターの手がずれても、キャラ傾き入力を有効にして、数回入力すると位置が補正されていき、改善されます。
アバターの表示ウィンドウが消えてしまったときの対処
最小化したまま終了すると？次回以降アバターのウィンドウが表示されなくなる。
しかも、何故かホットキーでのウィンドウ位置操作が利かない。
タスクバーのアイコン＞＞ウィンドウサムネイルを表示＞＞それを右クリック
＞＞「移動」＞＞キーボードカーソルどれか押し
～で回復しました。
Hitogata
ニコニコ動画
https://www.nicovideo.jp/watch/sm32898996配布サイト
https://sites.google.com/site/vhitogata/
モーションの追加
Hitogata モーション 追加 配布 でググろう。外部モデルを使う
Hitogataは外部モデルを読み込んで利用することができます。
対応形式は、VRM、FBX。
FBXはボーンの対応付け作業が必要なので、ちょっと難しいです。
VRoid Studioで書き出したVRMは読み込むだけで使えました。簡単！
でも、髪のハイライトやリムライトは消えちゃってますね。謎。
VRoid Studio
3Dアバター作成アプリ。無料で利用できます。まじか～。
標準機能を超えるカスタマイズはVRMで書き出し後にUnityやBlenderでするっぽい。
標準機能を超えるカスタマイズはVRMで書き出し後にUnityやBlenderでするっぽい。
え、簡単すぎない？
モデルデータのこと
3Dアバターのファイル形式は、VRM、FBX、PMX、など。
PMXはMikuMikuDanceのモデルデータ。
Blenderを利用して相互変換やモデル編集が出来るけど、うまく読み込めない、書き出せない、など相性が発生するかも（した）。上手く出来ている人のTipsを参考にするのが良さげ。素人がなんとなくやっても無理。
Blenderでモデリングして、UnityでVRMをセットアップするっぽい（UniVRM）、分からん。
参考情報
【オリジナルアバター制作】hitogataモデルをVRMに完璧に変換する方法！
https://www.youtube.com/watch?v=rQNs4qF6cIA
【30分で誰でもVtuber】HITOGATAで超高クオリティバ美肉！
https://www.youtube.com/watch?v=2LZ74-gGqUg
バーチャルYouTuberに誰でもウェブカメラを使ってなれる無料ツール「Hitogata」を使ってみました
https://gigazine.net/news/20180319-hitogata-virtual-youtuber-tool/
facerigを使わずHitogataで3Dモデルを動かす！
https://www.youtube.com/watch?v=pqUuulTztBA
VRoidメイキング
https://www.youtube.com/playlist?list=PLMPDWT5VfMfy9p_mljE_8ij7QGEmXniBX
3teneの使い方講座【LeapMotionの設定/VRoid・Live2Dのモデル追加/録画と編集】
https://www.youtube.com/watch?v=jwyW6N_JtvU
FaceRigのアバターを作る
https://www.youtube.com/playlist?list=PLHibPT6BqQBjbYhPFOKAlR25KQ1P9oFuV
ダイジェスト: [JP/ENGsubs]VMagicMirrorとか配信環境の話 / Yukarinette Connector, VSTHos
https://www.youtube.com/watch?v=TKvuImhF7bQ&t=8s
メモ
低価格機材
KINECT
XBOX周辺機器のモーションキャプチャーカメラ。
Unityのアセットストアでモーションキャプチャーのためのパッケージ（追加機能）が入手できます（多分……うろ覚え）。
全身を撮影出来る広い部屋が欲しい。パソコンの設定が難しそう。
v1とv2の新旧二機種で、アプリの対応状況が異なるはずなので注意。（多分）
Unityのアセットストアでモーションキャプチャーのためのパッケージ（追加機能）が入手できます（多分……うろ覚え）。
全身を撮影出来る広い部屋が欲しい。パソコンの設定が難しそう。
v1とv2の新旧二機種で、アプリの対応状況が異なるはずなので注意。（多分）
Leap Motion
アバターの手が動くやつ。2019.10時点で、～1.5万円程度。値上がり気味。
0 件のコメント:
コメントを投稿