【世界一(?)スマートにVTuberになるシステム作った】
— イワケン@AR好き (@tanaka_lit) 2018年5月4日
HMDもWebCameraのFaceトラッキングも使わずに、頭の動き、目の動き、瞬き、口の動きをアバターに同期させています。スマートなので外でもできます!
昨日から作り始めて1日でできました。JINS MEMEすごい!#バーチャルユーチューバー #VTuber pic.twitter.com/EaFPjxwubv
すごいですね!
JINS MEMEの存在はなんとなく知っていたけど、顔の動きとか目の動きが取れるんですね!しかもそれをハックできるっていうの知らなかった。
開発
取れるデータとSDKの情報はここにありました
ios,android,monacaは公式に書いてありました。
swift(ios)
Unityも有志の方がgithubにプラグインを公開されていました。
ブラウザでも?
JINS MEMEをブラウザでデバッグできるようにした。
— パッチギ (@patchgi) 2018年4月28日
首振り以外にも目がどこを向いているか、3軸加速度、まばたきの速さ、強さ、現在歩行しているかがブラウザから取れる。
この軽さで、めんどくさい環境構築がいらないヘッドトラッキング装置と考えるとかなり優秀な気がします。 pic.twitter.com/firln0Vwaz
商品
ちなみにアマゾンでも公式が売ってました。
普通のやつは4万
2万のMTは目の動きを取る眼電位センサーがないっぽい。