AIDB Daily Papers
ViSTAR:ARと3Dアバター、LLMコーチングエージェントによる仮想スキル訓練
※ 日本語タイトル・ポイントはAIによる自動生成です。正確な内容は原論文をご確認ください。
ポイント
- ViSTARは、AR環境でバスケットボールのスキル練習を支援し、バランス、姿勢、タイミングに関するフィードバックを提供するシステムである。
- 3Dモーション再構築とLLMを活用し、時空間的な関節データから自然言語のコーチングキューを生成する点が新しい。
- 実験の結果、参加者はAIによるフィードバックをコーチのフィードバックよりも好む傾向があり、姿勢やバランスの改善に役立つと報告した。
Abstract
We present ViSTAR, a Virtual Skill Training system in AR that supports self-guided basketball skill practice, with feedback on balance, posture, and timing. From a formative study with basketball players and coaches, the system addresses three challenges: understanding skills, identifying errors, and correcting mistakes. ViSTAR follows the Behavioral Skills Training (BST) framework-instruction, modeling, rehearsal, and feedback. It provides feedback through visual overlays, rhythm and timing cues, and an AI-powered coaching agent using 3D motion reconstruction. We generate verbal feedback by analyzing spatio-temporal joint data and mapping features to natural-language coaching cues via a Large Language Model (LLM). A key novelty is this feedback generation: motion features become concise coaching insights. In two studies (N=16), participants generally preferred our AI-generated feedback to coach feedback and reported that ViSTAR helped them notice posture and balance issues and refine movements beyond self-observation.
Paper AI Chat
この論文のPDF全文を対象にAIに質問できます。
質問の例: