← 返回信息流
技术博客arXiv cs.CL·3 小时前

Reddit癌症谣言多维分类研究

原标题:Beyond Binary Detection: A Multi-Dimensional Taxonomy of Cancer Misinformation on Reddit

速览

该研究针对Reddit上乳腺癌、肺癌等四种癌症讨论,构建了七维度错误信息分类体系,涵盖信息类型、风险等级等。专家标注数据评估多个大模型,发现约6%的讨论包含错误信息,少样本提示显著提升分类效果。研究揭示了无依据治疗、质疑常规医学等反复出现的错误叙事。

AI 深度解读

背景

癌症相关讨论在社交媒体上构成了一个重要的信息交换和同伴支持空间,但同时也成为虚假信息传播的温床。这些虚假信息可能影响用户的预防、筛查和治疗决策。以往针对癌症虚假信息的研究往往依赖于狭隘的定义、小规模数据集或简单的二元标注框架(即只判断“真”或“假”),无法捕捉虚假信息的复杂性和多维特征。Reddit 作为全球活跃的论坛平台,其癌症相关子版块(如乳腺癌、肺癌、结肠癌、前列腺癌)集中了大量的患者、家属和医疗从业者讨论,是研究虚假信息传播的理想场景。然而,现有工作缺乏一个系统性的、可扩展的分类体系来刻画不同类型、不同风险等级和不同立场的虚假信息。

核心内容

该论文提出了一种多维度分类法(multi-dimensional taxonomy),用于表征 Reddit 上关于乳腺癌、肺癌、结肠癌和前列腺癌的讨论中的虚假信息。分类法涵盖了七个维度,包括虚假信息存在性(misinformation presence)、信息类型(information type)、风险等级(risk level)、立场(stance)和主题焦点(topical focus)等。论文通过专家标注的数据集,评估了多个大型语言模型(LLMs)在可扩展的虚假信息标注任务上的表现,并分析了 Reddit 各社区中癌症虚假信息的分布与特征。

实验结果显示,Reddit 的癌症讨论中约有 6% 的内容包含虚假信息,且不同社区(不同癌症类型子版块)以及不同虚假信息主题之间存在显著差异。在自动标注方面,Few-shot prompting 显著提升了 LLM 的分类性能,尤其是在那些需要细粒度区分的维度上(如风险等级、立场等)。论文还识别出几种反复出现的虚假信息叙事模式:未经证实的治疗方案对传统医学的不信任,以及关于诊断和筛查的误导性声称

该研究公开了其分类法、标注数据集以及分析发现,为在线癌症虚假信息的多维度建模提供了基础框架。

关键要点

  • 多维度分类法:论文构建了一个包含七个维度的分类体系,覆盖虚假信息的存在性、信息类型、风险等级、立场、主题焦点等。这突破了传统“真/假”二元检测的局限。
  • 虚假信息比例:Reddit 癌症讨论中约有 6% 的内容被标注为虚假信息,但不同社区(如乳腺癌 vs. 前列腺癌讨论)和不同主题之间的差异很大。
  • LLM 标注表现:Few-shot prompting 能显著提高 LLM(包括 GPT 系列等)的分类准确率,尤其是在处理“风险等级”和“立场”这类细腻维度时效果突出。
  • 常见虚假叙事:反复出现的虚假信息主题包括:宣传未经科学验证的替代疗法、质疑主流医学的有效性和安全性、以及传播关于癌症诊断和筛查的误导性信息(如夸大筛查风险或低估其益处)。
  • 资源开放:论文提供了完整的分类法、专家标注数据集和实验代码,供后续研究使用。

意义与影响

该研究为社交媒体上的癌症虚假信息检测提供了一套更系统、更精细的分析工具。传统上,此类研究要么依赖人工审核(成本高、规模小),要么使用简单的二分类模型(忽略虚假信息内部的差异)。本文的多维度分类法使得研究者能够区分“错误的信息类型”(如误传事实)与“有害的叙事”(如煽动对医疗系统的怀疑),从而为后续的干预策略(如精准推送辟谣内容、识别高风险用户群体)提供更精准的依据。

此外,Few-shot prompting 的成功应用表明,大语言模型可以在没有大量训练数据的情况下,高效地完成复杂的虚假信息标注任务。这降低了该分类法的应用门槛,使其可以推广到其他语言、平台或疾病领域。论文识别的三类常见虚假叙事——未经证实的疗法、对主流医学的不信任、筛查误导——也为公共卫生机构和社交媒体平台提供了重点监测方向。

最后,该研究基于 Reddit 的真实讨论数据,结果具有生态效度。尽管 6% 的比例看似不高,但考虑到 Reddit 上癌症相关帖子的绝对数量庞大,其传播影响不可忽视。未来的工作可以在此基础上,结合用户行为分析、时间演化建模,进一步理解虚假信息的传播机制与干预窗口。

查看原文 →arxiv.org