研究进展arXiv AI / CL
多模态推理中感知蒸馏的信用分配新方法

摘要
研究者提出感知校正蒸馏(PCD),一种无标签方法,通过下游失败和师生分歧作为互补证据,识别可纠正的感知失败。PCD使用软与门强化蒸馏,在八个基准测试中显著提升多模态推理性能。
背景解释
多模态推理模型常因感知错误导致推理失败,传统蒸馏方法无法区分错误来源。PCD通过分离感知与推理过程,仅针对感知错误进行校正,避免干扰正确推理,为提升模型可靠性提供了新思路。
原文译文
以下为抓取到的原文内容译文,已统一为站内阅读格式。
这条新闻暂未保存可复现的原文正文,可以点击原文链接阅读。
来源地区
Global
热度分
81
分类
研究进展
语言
en
