AIDB Daily Papers
骨格ベース行動認識のための概念駆動型論理推論ニューロシンボリックフレームワーク
※ 日本語タイトル・ポイントはAIによる自動生成です。正確な内容は原論文をご確認ください。
ポイント
- 骨格ベースの行動認識を、運動プリミティブに関する概念駆動型の論理推論として再定式化するニューロシンボリックフレームワークを提案した。
- この研究は、表現学習と記号推論を橋渡しし、解釈可能な論理構造を持つ行動認識を実現する点で重要である。
- 提案手法は、NTU RGB+D等のデータセットで高い認識性能を示し、論理構造に基づいた解釈可能な説明を提供することに成功した。
Abstract
Skeleton-based human activity recognition has achieved strong empirical performance, yet most existing models remain black boxes and difficult to interpret. In this work, we introduce a neurosymbolic formulation of skeleton-based HAR that reframes action recognition as concept-driven first-order logical reasoning over motion primitives. Our framework bridges representation learning and symbolic inference by grounding first-order logic predicates in learnable spatial and temporal motion concepts. Specifically, we employ a standard spatio-temporal skeleton encoder to extract latent motion representations, which are then mapped to interpretable concept predicates via a spatio-temporal concept decoder that explicitly separates pose-centric and dynamics-centric abstractions. These concept predicates are composed through differentiable first-order logic layers, enabling the model to learn human-readable logical rules that govern action semantics. To impose semantic structure on the learned concepts, we align skeleton representations with LLM-derived descriptions of atomic motion primitives, establishing a shared conceptual space for perception and reasoning. Extensive experiments on NTU RGB+D 60/120 and NW-UCLA demonstrate that our approach achieves competitive recognition performance while providing explicit, interpretable explanations grounded in logical structure. Our results highlight neurosymbolic reasoning as an effective paradigm for interpretable spatio-temporal action understanding. Code: https://github.com/Mr-TalhaIlyas/REASON
Paper AI Chat
この論文のPDF全文を対象にAIに質問できます。
質問の例: