AIDB Daily Papers
OCR-Memory:長期間エージェントの記憶のための視覚的コンテキスト検索
※ 日本語タイトル・ポイントはAIによる自動生成です。正確な内容は原論文をご確認ください。
ポイント
- 長期間のタスクでエージェントの記憶容量を拡張するため、視覚情報を高密度表現として利用するOCR-Memoryを提案した。
- 従来のテキストベースの記憶システムはトークン数に限界があったが、OCR-Memoryは画像を介して長大な履歴を保持できる点で新しい。
- 実験により、OCR-Memoryはコンテキスト制限下で記憶容量を増やし、正確な証拠回復を実現することが示された。
Abstract
Autonomous LLM agents increasingly operate in long-horizon, interactive settings where success depends on reusing experience accumulated over extended histories. However, existing agent memory systems are fundamentally constrained by text-context budgets: storing or revisiting raw trajectories is prohibitively token-expensive, while summarization and text-only retrieval trade token savings for information loss and fragmented evidence. To address this limitation, we propose Optical Context Retrieval Memory (OCR-Memory), a memory framework that leverages the visual modality as a high-density representation of agent experience, enabling retention of arbitrarily long histories with minimal prompt overhead at retrieval time. Specifically, OCR-Memory renders historical trajectories into images annotated with unique visual identifiers. OCR-Memory retrieves stored experience via a emph{locate-and-transcribe} paradigm that selects relevant regions through visual anchors and retrieves the corresponding verbatim text, avoiding free-form generation and reducing hallucination. Experiments on long-horizon agent benchmarks show consistent gains under strict context limits, demonstrating that optical encoding increases effective memory capacity while preserving faithful evidence recovery.
Paper AI Chat
この論文のPDF全文を対象にAIに質問できます。
質問の例: