スマホは、あなたの動きを——フォームを直せるほど正確に——計測できるのか。その問いこそ、ARKit モーションキャプチャに注目すべき理由です。AppleのARKitは、ふつうの2D iPhone動画から3Dモーションキャプチャを再構成し、実世界へ自動校正し、リアルタイムで、しかも無料アプリで実現します。この記事(上の動画の要約)では、なぜ正確な動作分析が難しいのか、代表的な手法をどう比べるのか、そしてなぜスマホがついに実用的な道具になったのかを解説します。
目次
フィットネスブームと、フォームが重要な理由
フィットネスアプリは身近な存在になりました。ダウンロード数は2013年の200万未満から2018年には400万超へ増え、人気アプリは累計で数億回インストールされています。中にはスローモーション動画からバーベルの速度を測れるものもあります。しかし、回数を数えることと実際に動きを修正することの間には大きな隔たりがあります。誤ったフォームは狙いと違う筋肉を使い、肩のインピンジメントから膝の痛みまで、ケガの原因になります。フォームを「記録する」だけでなく「直す」には正確なモーションキャプチャが必要で、そこが難しいのです。

難所:正確なモーションキャプチャ
あらゆる選択肢に共通する落とし穴があります。正確な方法ほど、使いにくいのです。このトレードオフを理解することが、理想的なラボではなく現実の制約に合ったモーションキャプチャを選ぶ鍵になります。

VICON:3Dのゴールドスタンダード
VICONのような3D光学式システムはゴールドスタンダードで、非常に高精度です。だからこそ多くのバイオメカニクス研究の基盤になっています。しかし高価で複雑、ラボに限られます。一般の運動者やトレーナーには現実的ではありません。

2D動画:安価だが限定的
対照的に、2Dの動画分析は安価で手軽です。ただし一度に一つの平面しか捉えられず、回転を捉えられません。前額面の膝の角度は誤解を招くことがあります。膝の外反は、カメラに映らない股関節の回旋と結びついているからです。手軽ですが、読み違えやすいのです。

Microsoft Kinect:3Dだが専用機が必要
MicrosoftのKinectは3Dで動きを捉え、VICONよりずっと安価で使いやすいものです。しかし専用デバイスが必要で、研究では左右・上下方向の動きが苦手だと示されています。紙の上では2Dより優れていても、ポケットに常に入っているものではありません。

転機:スマホのコンピュータビジョン
そこにコンピュータビジョンと機械学習が現れ、状況を一変させました。モーションキャプチャアプリは、追加のハードなしにスマホ1台で信頼でき妥当なバイオメカニクス分析が可能だと示しました。ニューラルネットが1本のふつうの動画から3D姿勢を推定します——現代のマーカーレス姿勢推定の精度を支えるのと同じ発想が、いま手元のデバイスで動くのです。

なぜARKitが有望な答えなのか
ここで登場するのがARKitです。AppleのARプラットフォームは、ふつうの2D動画から3Dの動きを再構成し、実世界座標へ自動校正し、リアルタイムで、誰でもダウンロードできる無料アプリで実現します。この組み合わせこそ、ARKit モーションキャプチャが有望な理由です。VICON、素の2D動画、Kinectを縛ってきた「精度か使いやすさか」というトレードオフを崩すからです。動画で示す着想は、ARKitでキネマティクス分析を行い、確実に追跡できるエクササイズのデータベースを構築すること——自分のフォームを自分のスマホで直す、その第一歩です。より広い手法の全体像は、3Dマーカーレスモーションキャプチャの3手法の解説もご覧ください。

よくある質問
スマホで本当に3Dモーションキャプチャができますか?
できます。コンピュータビジョンによる姿勢推定を使えば、スマホ1台でふつうの動画から3Dの動きを復元でき、ARKitはさらに実世界への自動校正をリアルタイムで加えます。すべての計測でマーカー式ラボを置き換えるわけではありませんが、日常のフォーム分析には十分実用的です。
ARKit モーションキャプチャはVICONと同じくらい正確ですか?
まだです。ラボ級の精度ではVICONがゴールドスタンダードのままです。ARKitの狙いは別のところにあります。わずかな精度と引き換えに、コスト・可搬性・使いやすさで大きな利点を得る——それこそ日常の動作分析に必要なものです。
2D動画やKinectではだめなのですか?
2D動画は1平面しか見えず回転を捉えられないため、膝の外反のような動きを読み違えることがあります。Kinectは3Dを捉えますが専用デバイスが必要で、一部の方向の動きが苦手です。ARKitなら、すでに持っているスマホから追加ハードなしで3Dが得られます。
まとめ
では、スマホでフォームは直せるのか。完璧ではなく、まだ道半ばです——しかし技術は着実に進んでいます。ARKit モーションキャプチャは、ふつうのiPhoneをリアルタイムの3D動作分析ツールに変え、ラボ限定の精度と日常の手軽さの隔たりを縮めます。これはその第一歩です。全体像は、モーションキャプチャとパフォーマンス分析の基礎から始めてみてください。
福島 崇(Takashi Fukushima) — Sports Science & Pose Estimation.
▶ YouTubeで登録 · ウェブサイト · ORCID · お問い合わせ