投稿者名:tikitaka1922

Split screen: a webcam feed on the left with body, face and hand landmarks drives a VRM avatar on the right that mirrors the pose with both hands raised. A live readout shows eyeBlinkLeft at 0.24 with the VRM expression still neutral, captioned 'eyes open, reading ~0.3' and 'so 0.3 is the new zero'.
姿勢推定

完成版:1台のウェブカメラで、体・顔・指・手首 — アバタートーク

アバタートークの集大成:体・顔・指・手首が、1台のウェブカメラで1つのVRMを、すべてブラウザ上で動かします。なぜ腕の計算では手首を回せないのか、間違った軸で曲がっていた親指、フレームの再利用と取りこぼしの計数、0.3を新しいゼロにするニュートラルな顔、鏡の原則——そして正直な約9fps(言っていた30ではなく)。

Split screen: a webcam feed with body, face and hand landmarks on the left drives a VRM avatar on the right that mirrors the pose, an open-mouth expression and raised hands, with a live blendshape-to-expression readout.
姿勢推定

顔・手・フィルタリング:ウェブカメラ・アバターの完成 — アバタートーク #4(MediaPipe → three.js)

アバタートークの完結編:体・顔・手が1つのVRMを、ブラウザの単一レンダーループで動かします。遅延と揺れの二律背反を破る One Euro フィルター、ランドマークを「源」で平滑化、MediaPipeの52 ARKitブレンドシェイプをVRMの表情へ、そして指の「開閉(bend)だけ」を取るハンドトラッキング。

2つの姿勢推定パイプライン、1つの問い — 検証あり、それともなし? 論文2本のレビューのタイトルスライド:同じ材料、異なる根拠。
スポーツバイオメカニクス, 姿勢推定

2つの姿勢推定パイプライン、1つの問い — 検証あり、それともなし?

作り方は同じ——姿勢を検出し、追跡し、分類する——でも根拠はまるで違う。2026年の一方は理学療法の運動を専門家の正解データと照合して採点し(RTMPose + GRU、約96%)、もう一方は正解ラベルなしでバスケの動きをプロファイリングし、それを自ら明言する。パイプラインを検証するのは検出器ではなく正解データです。

動きを捉えることはゴールではない — 検証済みの運動学から、モデル化された傷害リスクの数値へ:論文2本のレビューのタイトルスライド。
スポーツバイオメカニクス, 姿勢推定

動きを捉えることはゴールではない — 運動学から、モデル化された傷害リスクの数値へ

動きは計測できた。でも終わりではありません。2026年7月の2本の論文が、検証済みの運動学からモデル化された傷害リスクの数値までをたどります。OpenCapマーカーレスのスコーピングレビュー(51件)と、バドミントンのランジからACL負荷を推定するモデル(OpenSim+XGBoost、R²約0.91)。推論の層ごとに不確実性は積み重なります。

Split screen: a webcam feed with MediaPipe pose landmarks on the left drives a 3D VRM avatar on the right, which mirrors the pose in real time in the browser.
姿勢推定

リターゲティング:ウェブカメラでVRMアバターを動かす — アバタートーク #3(MediaPipe → three.js)

アバタートーク #3:MediaPipeの姿勢ランドマークをVRMアバターのボーン回転へリターゲティングします。位置と回転の違い、MediaPipe→VRMの座標反転と鏡映し、基準→目標のクォータニオン、ワールド→ローカルのチェーン、フレームレート非依存のイージング、そしてカメラ1台の深度補正まで。

Real-time browser motion capture: a live upper-body skeleton drawn by MediaPipe PoseLandmarker over a webcam feed, green bones and pink landmarks.
姿勢推定

ブラウザだけでモーションキャプチャ — 約200行で作る(アバタートーク #1 / MediaPipe + TypeScript)

インストールもサーバーも不要。ブラウザだけで動くリアルタイムのモーションキャプチャを約200行のTypeScriptで作ります。アバタートーク #1:ウェブカメラ、透明キャンバス、MediaPipeのPoseLandmarkerで上半身スケルトンをライブ描画。実際に動かす2つの落とし穴も解説。

上部へスクロール