← 返回信息流
技术博客arXiv cs.AI·4 小时前

PRISMR框架:通过参数化表征内化解决多模态排序解析崩溃

原标题:PRISMR: Overcoming Parse Collapse in Multimodal Listwise Ranking via Parameterized Representation Internalization

速览

生成式多模态大模型在长上下文列表排序中常出现解析崩溃,即模型流畅但遗漏候选项并提前终止。PRISMR框架通过轻量级超网络并行编码多模态候选项,生成实例特定的LoRA权重并合成适配器,以参数化结构条件替代瞬态上下文处理。该方法增强了列表结构的内化能力,显著减少解析崩溃,并在跨领域和指令微调骨干模型中表现出良好的迁移效果。

AI 深度解读

AI 正在阅读原文并生成深度解读…(首次约 20–40 秒,之后秒开)
查看原文 →arxiv.org