AIDB Daily Papers
思い出を呼び覚ます:日常写真から生成するダイナミック3Dジオラマ「MemoryDiorama」
※ 日本語タイトル・ポイントはAIによる自動生成です。正確な内容は原論文をご確認ください。
ポイント
- MemoryDioramaは、AIが生成したコンテキスト情報を付加し、個人の記憶想起を支援する新しいシステムである。
- LLMによるシーン分析と3Dオブジェクト生成、アニメーション技術を統合し、写真から動的な3Dジオラマを生成する点が新しい。
- ユーザ実験の結果、MemoryDioramaは写真のみや静的ジオラマよりも、より詳細で鮮明な記憶想起を促すことが示された。
Abstract
We present MemoryDiorama, a prototype system that introduces augmented memory cues, a concept that extends captured personal media with AI-generated contextual information to enhance autobiographical memory recall. MemoryDiorama transforms everyday photos into dynamic 3D dioramas in mixed reality by integrating LLM-based scene analysis with 3D object generation, animation, and spatial composition. The system extracts geographic information, object attributes, lighting conditions, and atmospheric elements from the photos. It then animates these elements with generative components such as object animations, human motion, geographical effects, and particle effects to provide richer cues for memory recall. We evaluated MemoryDiorama in a within-subject user study with 18 participants, comparing three conditions: Photo-Only, Static Diorama, and MemoryDiorama. Compared with both Photo-Only and Static Diorama, MemoryDiorama elicited more internal and in-cue details during recall. It also increased perceptual details and visual vividness ratings, suggesting richer recollective experience.
Paper AI Chat
この論文のPDF全文を対象にAIに質問できます。
質問の例: