← 返回信息流
技术博客arXiv cs.CL·3 小时前

视觉经验影响语义记忆导航中的熵

原标题:Entropy in Semantic Memory Navigation in Blind and Sighted Individuals: The Effect of Visual Experience

速览

研究通过属性列举任务比较盲人与视力正常者的语义记忆导航差异,利用嵌入的语义熵指标度量检索可预测性。结果显示视力正常者对抽象概念熵更高,盲人则对视觉显著的具体概念(如企鹅)熵更高。这表明视觉经验在语义记忆组织和动态导航中起关键作用。

AI 深度解读

背景

语义记忆的具身理论(embodied accounts)强调感觉运动系统在知识获取与存储中的核心作用。先天性盲人群体为检验这些假设提供了关键实验条件——他们可以回答“概念表征是否需要视觉经验”这一根本性问题。以往研究多基于行为实验,但近年来自然语言处理(NLP)技术的进步,特别是基于嵌入(embedding)的语义度量方法,使得研究者能够从语言产出的动态过程中量化语义记忆的组织模式。这篇来自 arXiv cs.CL 的论文(提交于 2026 年 7 月 13 日)正是利用语义熵(semantic entropy)这一指标,系统比较了盲人与视力正常人在语义记忆导航上的差异。

核心内容

该研究采用属性列出现(property listing task)实验范式,要求被试对具体概念(如“企鹅”)和抽象概念(如“自由”)列出其属性。研究者随后计算了每个被试在列属性过程中的语义熵——一种基于嵌入的 NLP 指标,用于衡量语义检索的可预测性。熵值越高,表示被试在记忆中导航时产生的概念分布越分散、越不可预测;熵值越低,则表明检索路径更集中、更确定。

研究使用广义线性混合模型(Generalized Linear Mixed Models, GLMM)分析数据,得到以下核心发现:

  1. 视力正常组:抽象概念的语义熵显著高于具体概念,即对于抽象概念,被试的检索路径更分散、更不确定。
  2. 盲人组:抽象概念与具体概念之间的熵值没有显著差异,即盲人处理两类概念时检索模式接近。
  3. 交叉效应:盲人组在视觉上显著的具体概念(如“企鹅”)上表现出更高的语义熵,而视力正常组对这些概念则熵值较低。

这些结果揭示了一个关键模式:视觉经验塑造了语义记忆的组织结构。视力正常者依赖视觉特征来锚定具体概念,因此检索路径更集中;而盲人由于缺乏视觉经验,无法利用这一线索,导致对视觉显著具体概念同样产生分散的检索模式。相反,抽象概念因缺乏具体视觉表征,盲人与视力正常者的检索模式差异不大。

关键要点

  • 方法创新:首次将语义熵(基于词嵌入的 NLP 指标)应用于盲人语义记忆研究,提供了量化语义导航动态的新工具。
  • 核心发现:视力正常者表现出“抽象 > 具体”的熵差异模式,而盲人无此差异;盲人反而对视觉显著具体概念熵更高。
  • 理论意义:支持具身认知观点,即视觉经验是语义记忆组织与动态导航的关键影响因素。
  • 控制条件:研究同时考虑了具体/抽象维度与视觉显著性维度,分离了两种可能的效应。
  • 局限性暗示:仅使用属性列出现任务,未来可结合其他语义任务(如自由联想、语义相似性判断)来验证结论的普适性。

意义与影响

该研究为具身认知理论提供了实证证据,表明即使在没有视觉输入的情况下,语义记忆仍然能够形成,但它的组织方式会因缺乏视觉经验而发生根本性改变。这一发现对认知科学、神经语言学以及人工智能中的语义建模都有重要启示:

  • 在认知科学领域,它挑战了纯粹符号主义的概念表征模型,强调了感觉运动经验在概念理解中的约束作用。
  • 在临床和教育方面,研究结果提示为盲人设计概念学习策略时,可能需要更多地依赖触觉、听觉等其他模态信息,而非依赖视觉隐喻。
  • 在 NLP 与 AI 领域,该研究提示当前基于大规模文本训练的语义嵌入模型(如 BERT、GPT)可能隐含了视觉经验带来的偏差——因为它们训练数据主要来自视力正常人群的语言产出。未来构建更公平的语义模型时,需要考虑不同感知经验群体的语言数据。

总之,这篇论文通过将计算语言学工具与认知心理学实验相结合,清晰地展示了“视觉经验如何塑造语义记忆的动态导航”,为理解人类概念系统的可塑性提供了新的视角。

查看原文 →arxiv.org