ChatGPT通过美国医疗执照考试

内容提要：

• ChatGPT 在一项研究实验中通过了美国行医执照考试。
• 根据Ansible Health in Mountain View的医学博士Victor Tseng的说法，ChatGPT 表现出“中等准确度”并且“在合格范围内”，在所有考试中都能达到50%以上的准确率。
• ChatGPT在所有三项考试的及格阈值上或接近通过阈值，没有任何专门培训或强化。
• ChatGPT“在解释中表现出高度的一致性和洞察力。这些结果表明，大型语言模型可能有助于医学教育和临床决策。”
• 据 Axios 报道，该研究仍在接受同行评审。

据研究人员称，Open AI 的人工智能聊天机器人ChatGPT似乎能够通过美国医疗执照考试的所有三个部分。

根据一项新的研究实验， ChatGPT 在考试中表现出“中等准确度”并且“在及格范围内”。

据 Axios 报道，这项研究仍在接受同行评审，这是一个专业人士分析同事工作以确保其准确和重要的过程。

研究人员在论文中写道：“ChatGPT 在没有任何专门培训或强化的情况下，在所有三项考试中的表现都达到或接近通过门槛。”

大多数作者都在 Ansible Health 工作，这是一家位于加利福尼亚州山景城的初创公司，该公司一直在研究使用 AI 改善医疗保健结果的方法。

他们表示，该工具能够证明“其解释具有高度的一致性和洞察力”，结果“表明大型语言模型可能有助于医学教育，并可能有助于临床决策制定。”

然而，研究人员确实排除了一组“不确定”的答案，因为根据Axios的说法，ChatGPT 似乎被编程为避免提供医疗建议。

“这些答案太笼统了，很难说它们是对还是错，”作者之一、在布朗大学学习医学的摩根奇塔姆说，他是一家风险投资公司 Bessemer Venture Partners 专注于医疗保健的副总裁资本公司。

考试的第一步通常由完成两年学习的医学生参加；第二名是四年级的医学生，他们也完成了长达两年的临床轮换；根据这项研究，第三步由研究生完成。

ChatGPT以其撰写高质量论文和处理复杂主题的能力给学术界留下了深刻印象。然而，也有人指出，聊天机器人容易受到错误信息的影响，并且缺乏一定的理解深度。 

据弗吉尼亚乔治梅森大学的一位学者称，另一种由人工智能安全和研究公司 Anthropic 开发的人工智能已经通过了大学水平的法律和经济学考试。

该研究的标题为“ChatGPT 在 USMLE 上的表现：使用大型语言模型进行人工智能辅助医学教育的潜力”，并发表在medRxiv上，这是一个收集尚未经过同行评审的医学、临床和健康科学论文的在线档案。 

原文链接：https://www-businessinsider-com.translate.goog/researchers-tested-chatgpt-same-test-questions-aspiring-doctors-2023-1