UnityでFaceTrackingをしてみたが現状はイマイチ

f:id:peroon:20161117005652p:plain

  • アセットはOpenCV + FaceTracker
  • PCのMacで動作確認
  • WebCamTextureのFPSが遅い(Android, iOSなら速くする方法はある)
  • 目を閉じてる度と口を開いている度を点で求めてBlendshapeでモデルの目と口に反映
  • 目をつぶる判定、口を開けている判定は点でやると取りづらい
  • 今はSnapchatやSnow, FaceRigに及ばない
  • UnityはWebCamTextureが弱いので、こういうときはネイティブで作れたらなって思う