AIDB Daily Papers
BLEUの罠からの脱却:脳波からテキストへの変換における意味的ガイダンス分離型信号接地フレームワーク
※ 日本語タイトル・ポイントはAIによる自動生成です。正確な内容は原論文をご確認ください。
ポイント
- 脳波信号から自然言語を解読する研究で、意味的バイアス、信号無視、BLEUの罠という課題に対処する。
- 大規模言語モデル(LLM)と脳波エンコーダの連携を再設計し、意味的プロンプトを注入することで、信号接地生成を強化する。
- 多様性とアラインメントを評価する新しい評価指標を導入し、従来手法を凌駕する性能と、ノイズ入力に対する幻覚の抑制を確認した。
Abstract
Decoding natural language from non-invasive EEG signals is a promising yet challenging task. However, current state-of-the-art models remain constrained by three fundamental limitations: Semantic Bias (mode collapse into generic templates), Signal Neglect (hallucination based on linguistic priors rather than neural inputs), and the BLEU Trap, where evaluation metrics are artificially inflated by high-frequency stopwords, masking a lack of true semantic fidelity. To address these challenges, we propose SemKey, a novel multi-stage framework that enforces signal-grounded generation through four decoupled semantic objectives: sentiment, topic, length, and surprisal. We redesign the interaction between the neural encoder and the Large Language Model (LLM) by injecting semantic prompts as Queries and EEG embeddings as Key-Value pairs, strictly forcing the model to attend to neural inputs. Furthermore, we move beyond standard translation metrics by adopting N-way Retrieval Accuracy and Fréchet Distance to rigorously assess diversity and alignment. Extensive experiments demonstrate that our approach effectively eliminates hallucinations on noise inputs and achieves SOTA performance on these robust protocols. Code will be released upon acceptance at https://github.com/xmed-lab/SemKey.
Paper AI Chat
この論文のPDF全文を対象にAIに質問できます。
質問の例: