一项针对学术文献的大规模分析显示，去年发表的生物医学论文摘要中，约 1/7 可能借助 AI 完成撰写。2024 年医学数据库 PubMed 收录的 150 万篇摘要中，超过 20 万篇包含大模型（LLM）常推荐使用的词汇。许多团队试图评估 LLM 对学术产出的影响，但这一过程颇具挑战性，因为大多数使用者并未披露这种行为。研究人员利用了 LLM 流行后的风格化词汇去估计摘要是否是 AI 帮助撰写。研究发现，2024年有 454 个词汇的出现频率远高于 2010 年以来的任何年份。它们多为与研究内容无关的“风格词”，且以动词和形容词为主。科学词汇的演变是长期过程。2021年有 190 个“冗余词汇”，多为与研究内容相关的名词。但自 LLM 普及以来的词汇变化更为显著，且主要体现在风格层面。研究人员发现，在计算科学和生物信息学等领域，超过 1/5 的摘要由 LLM 辅助撰写。

doi.org/10.48550/arXiv.2406.07016
中国科学报：1/7生物医学论文摘要由AI撰写