正確な全身トラッキングは、フィットネスアプリからゲーム、バーチャルリアリティまで、あらゆる分野でメリットをもたらします。しかし、ハリウッド映画が視覚効果を生み出すために使用する、体にピッタリとフィットするボディトラッキングスーツに無理やり体を押し込みたい人はいません。実は、もっと楽な解決策があるのです。イヤホンやiPhoneなど、普段持ち歩いているデバイスを活用できるのです。
カーネギーメロン大学の Future Interfaces Group (FIG) が、全身トラッキングに関する新たな研究を発表しました。この研究は、ボディスーツや 100 万ドルのスタジオの精度に匹敵することはできませんが、それでもフィットネストラッキングの精度を向上させるのに十分な精度があり、特別なハードウェアを必要とせずに、ユーザーの動きを仮想現実の世界に変換できるようになります。
FIGの研究は、実はAppleがここ数年で申請した特許を彷彿とさせる。なぜなら、FIGが利用している機器はスマートウォッチ、スマートフォン、ワイヤレスイヤホンだけであり、これらはすべて加速度計、ジャイロスコープ、その他のモーション検知センサーを搭載し、フィットネストラッキングやAppleのAirPodsが提供する空間オーディオといった高度な機能を実現しているからだ。これらのセンサーから得られるデータは、開発者がサードパーティ製アプリやアクセサリで利用できるようSDKを通じて提供されるが、FIGの研究者たちは、IMUPoserと呼ばれるツールを使用してユーザーの全身のポーズをインテリジェントに計算する手段としてこのデータを活用しようとしている。
俳優の演技をキャプチャし、それをビデオゲームのキャラクターやCGで生成された映画のキャラクターに変換するには、数百ものトラッキングポイントの動きをキャプチャする必要があります。しかし、ここでは、ズボンのポケットに入れたスマートフォン、手首に装着したスマートウォッチ、そして耳に装着したイヤホンから、ユーザーの四肢の位置、あるいは背筋を伸ばして立っているのかしゃがんでいるのかなど、体の姿勢をインテリジェントに推測するのに十分なデータが得られます。
このアプローチは、ごくわずかな追跡データを扱うため、多くの仮定に基づいているため、100%に近い精度を保証するものではありません。例えば、人が歩いていると感知した場合、スマートフォンとスマートウォッチで追跡されている腕と脚とは反対側の腕と脚も動いていると想定しますが、同期が少しずれている（これは人間の自然な歩行動作です）と想定します。もちろん、IMUPoserが2台、あるいは1台のデバイスからのデータに頼らざるを得ない場合、精度はさらに低下しますが、常にスマートデバイスを身につけていない生活は想像できない人も多いでしょう。
このツールは、より堅牢なボディトラッキングツールに取って代わるのでしょうか？すぐにはそうはいきませんが、スマートデバイスに既に搭載されているモーションセンサーから収集されるデータを改善・精緻化するために活用できる可能性があります。多くのフィットネストラッカーは、ユーザーのアクティビティを推測しようとしますが、このツールは、物理的なハードウェアを改造したりアップグレードしたりすることなく、ユーザーが修正しなければならない回数を減らすのに役立ちます。
