スマホでフォームは直せる? ARKitによる3Dモーションキャプチャ

スマホは、あなたの動きを——フォームを直せるほど正確に——計測できるのか。その問いこそ、ARKit モーションキャプチャに注目すべき理由です。AppleのARKitは、ふつうの2D iPhone動画から3Dモーションキャプチャを再構成し、実世界へ自動校正し、リアルタイムで、しかも無料アプリで実現します。この記事(上の動画の要約)では、なぜ正確な動作分析が難しいのか、代表的な手法をどう比べるのか、そしてなぜスマホがついに実用的な道具になったのかを解説します。

フィットネスブームと、フォームが重要な理由

フィットネスアプリは身近な存在になりました。ダウンロード数は2013年の200万未満から2018年には400万超へ増え、人気アプリは累計で数億回インストールされています。中にはスローモーション動画からバーベルの速度を測れるものもあります。しかし、回数を数えることと実際に動きを修正することの間には大きな隔たりがあります。誤ったフォームは狙いと違う筋肉を使い、肩のインピンジメントから膝の痛みまで、ケガの原因になります。フォームを「記録する」だけでなく「直す」には正確なモーションキャプチャが必要で、そこが難しいのです。

フィットネスアプリのダウンロードは2013年の170万から2018年に410万へ増加し、人気アプリは累計1〜5億回インストール。
フィットネスアプリは身近に——だが動作を修正するには正確なモーションキャプチャが必要。

難所:正確なモーションキャプチャ

あらゆる選択肢に共通する落とし穴があります。正確な方法ほど、使いにくいのです。このトレードオフを理解することが、理想的なラボではなく現実の制約に合ったモーションキャプチャを選ぶ鍵になります。

モーションキャプチャのトレードオフ:正確な方法ほど使いにくい。
モーションキャプチャの核心的なトレードオフ:精度と使いやすさ。

VICON:3Dのゴールドスタンダード

VICONのような3D光学式システムはゴールドスタンダードで、非常に高精度です。だからこそ多くのバイオメカニクス研究の基盤になっています。しかし高価で複雑、ラボに限られます。一般の運動者やトレーナーには現実的ではありません。

VICONの3D光学式モーションキャプチャはゴールドスタンダード。最も高精度だが高価・複雑でラボ限定。
VICON:3Dのゴールドスタンダード——非常に高精度だが高価でラボに限られる。

2D動画:安価だが限定的

対照的に、2Dの動画分析は安価で手軽です。ただし一度に一つの平面しか捉えられず、回転を捉えられません。前額面の膝の角度は誤解を招くことがあります。膝の外反は、カメラに映らない股関節の回旋と結びついているからです。手軽ですが、読み違えやすいのです。

2D動画分析は安価で手軽だが1平面しか捉えられず、回転を捉えられない。
2D動画は安価で手軽だが、1平面のみで誤解を招くことがある——回転を捉えられない。

Microsoft Kinect:3Dだが専用機が必要

MicrosoftのKinectは3Dで動きを捉え、VICONよりずっと安価で使いやすいものです。しかし専用デバイスが必要で、研究では左右・上下方向の動きが苦手だと示されています。紙の上では2Dより優れていても、ポケットに常に入っているものではありません。

MicrosoftのKinectは深度センサーで3Dを実現するが専用デバイスが必要で、左右・上下方向の動きが苦手。
Kinectは安価に3Dを実現するが、専用デバイスが必要。

転機:スマホのコンピュータビジョン

そこにコンピュータビジョンと機械学習が現れ、状況を一変させました。モーションキャプチャアプリは、追加のハードなしにスマホ1台で信頼でき妥当なバイオメカニクス分析が可能だと示しました。ニューラルネットが1本のふつうの動画から3D姿勢を推定します——現代のマーカーレス姿勢推定の精度を支えるのと同じ発想が、いま手元のデバイスで動くのです。

コンピュータビジョンと機械学習により、ニューラルネットでスマホ1台の動画から信頼できるバイオメカニクス分析が可能に。
コンピュータビジョンが状況を一変——追加ハードなしにスマホ1台で信頼できる分析。

なぜARKitが有望な答えなのか

ここで登場するのがARKitです。AppleのARプラットフォームは、ふつうの2D動画から3Dの動きを再構成し、実世界座標へ自動校正し、リアルタイムで、誰でもダウンロードできる無料アプリで実現します。この組み合わせこそ、ARKit モーションキャプチャが有望な理由です。VICON、素の2D動画、Kinectを縛ってきた「精度か使いやすさか」というトレードオフを崩すからです。動画で示す着想は、ARKitでキネマティクス分析を行い、確実に追跡できるエクササイズのデータベースを構築すること——自分のフォームを自分のスマホで直す、その第一歩です。より広い手法の全体像は、3Dマーカーレスモーションキャプチャの3手法の解説もご覧ください。

AppleのARKitはiPhoneの2D動画から3Dの動きを再構成し、自動校正・リアルタイムで無料アプリで実現。
ARKitは、ふつうの2D動画から3Dの動きを再構成——自動校正、リアルタイム、無料アプリで。

よくある質問

スマホで本当に3Dモーションキャプチャができますか?

できます。コンピュータビジョンによる姿勢推定を使えば、スマホ1台でふつうの動画から3Dの動きを復元でき、ARKitはさらに実世界への自動校正をリアルタイムで加えます。すべての計測でマーカー式ラボを置き換えるわけではありませんが、日常のフォーム分析には十分実用的です。

ARKit モーションキャプチャはVICONと同じくらい正確ですか?

まだです。ラボ級の精度ではVICONがゴールドスタンダードのままです。ARKitの狙いは別のところにあります。わずかな精度と引き換えに、コスト・可搬性・使いやすさで大きな利点を得る——それこそ日常の動作分析に必要なものです。

2D動画やKinectではだめなのですか?

2D動画は1平面しか見えず回転を捉えられないため、膝の外反のような動きを読み違えることがあります。Kinectは3Dを捉えますが専用デバイスが必要で、一部の方向の動きが苦手です。ARKitなら、すでに持っているスマホから追加ハードなしで3Dが得られます。

まとめ

では、スマホでフォームは直せるのか。完璧ではなく、まだ道半ばです——しかし技術は着実に進んでいます。ARKit モーションキャプチャは、ふつうのiPhoneをリアルタイムの3D動作分析ツールに変え、ラボ限定の精度と日常の手軽さの隔たりを縮めます。これはその第一歩です。全体像は、モーションキャプチャとパフォーマンス分析の基礎から始めてみてください。


福島 崇(Takashi Fukushima) — Sports Science & Pose Estimation.
YouTubeで登録  ·  ウェブサイト  ·  ORCID  ·  お問い合わせ

コメントする

メールアドレスが公開されることはありません。 が付いている欄は必須項目です

上部へスクロール