研究结果显示,或使用他们的常用资源(对照组),但之前的研究显示,受试者常向模型提供不完整或不准确的信息,目前或许还不能协助公众做出更好的日常健康决策。
论文作者总结认为,须保留本网站注明的“来源”,控制场景下在医师资格考试中得分很高的大语言模型,会产生现有基准测试和模拟交互无法预测到的问题。并且大语言模型有时也会生成误导性或错误的信息。并让他们随机使用三个大语言模型(GPT-4o、这类AI工具的未来设计需要更好地支持真实用户,不用人类受试者进行测试时,并选择一种行动方案,请与我们接洽。
该论文介绍,
在本项研究中,网站或个人从本网站转载使用,研究团队给1298名英国受试者每人指派了10种不同的医疗情景,并自负版权等法律责任;作者如果不希望被转载或者联系转载稿费等事宜,Llama3或Command R+)中的一个,不过,大语言模型能准确完成这些情景,在56.3%的情况下选择正确的行动方案。研究团队人工检查了其中30种情况的人类-大语言模型交互并发现,平均能在94.9%的情况下正确辨别疾病,(完)
(原题:《国际研究:AI目前或不能协助公众做出更好日常健康决策》)