Hugging Face Daily Papers·· 3 天前AI 评分35
音频-视觉大语言模型中的“问题接力”机制与 SECRET 去幻觉方法
Devils in Question Relay: Source-Conditioned Relay Steering to Mitigate Hallucinations in Audio-visual Large Language Models
AI 导读
音频-视觉大语言模型(AVLLM)存在源混淆接地幻觉,即未使用模态的线索会诱发所需模态不支持的回答。路径干预与表征分析揭示“问题接力”机制是成因,据此提出的免训练方法 SECRET 通过对比不同模态路径干预诱发的问题表征,将问题状态引向所需源证据。
来源:Hugging Face Daily Papers · arxiv.org