Neo Sensory Innovations

次世代触覚技術とデジタルトランスフォーメーション

Detailed Analysis

力学触覚シミュレーション詳細

シミュレーション動画

動画が再生できない場合: ダウンロードはこちら

技術解説

仮想現実空間に第3の感覚『触覚』を導入するための第一歩として、物体に触れた際に生じる力を算出することを目的に作成した作品です。この作品では、コップを手で持ち上げる際に生じる手にかかる力をシミュレーションしました。コップの形状を捉え、その形とコップに触れた手の位置から、手に加わる力を概算し、シミュレーションを行います。MP4のような奥行き情報が欠落したメディアでも、対象の物体に対して初期情報(質量や形状など)があらかじめ設定されている条件下では、手にかかる力の概算をシミュレーションできるのではないかと考え、作成しました。AIについては、元動画のコップを持ち上げる動作の解析に使用し、コップの物体検出や手の詳細な動作検出、手の各ポイントに生じる力の計算については、プログラムによって実装しました。

時系列画像サマリー

Frame 1
Frame 2
Frame 3
Frame 4
Frame 5
Frame 6
Frame 7
Frame 8
Frame 9
Frame 10
Frame 11
Frame 12