ABSTRACT
We evaluated the performance of a large language model called ChatGPT on the United States Medical Licensing Exam (USMLE), which consists of three exams: Step 1, Step 2CK, and Step 3. ChatGPT performed at or near the passing threshold for all three exams without any specialized training or reinforcement. Additionally, ChatGPT demonstrated a high level of concordance and insight in its explanations. These results suggest that large language models may have the potential to assist with medical education, and potentially, clinical decision-making.还没有通过。
研究显示，人工智能（AI）聊天机器人ChatGPT通过美国执业医师资格考试（USMLE），得分达到或接近及格所需的60分。
美国期刊《PLOS数码医疗》星期四（2月9日）发布的报告说，该研究由3个部份组成，採用USMLE试卷2022年6月版376道试题中的350道，测试ChatGPT的多个医学学科知悉，涉及基础科学、生物化学、诊断推理和生物道德学。
结果显示，ChatGPT在3个部份中取得了52.4至75分的成绩。它还在研究报告的撰写方面提供了辅助。
研究员指出，这标志着临床AI成熟的一个显著里程碑。
「这些成绩说明，大量的语言模型或许可以辅助医疗教育，且有可能用于临床决策。」
由加州公司OpenAI研发的ChatGPT可以在几秒之内编写论文、诗歌和程序代码。
新西兰软件工程专家麦考伦（Simon McCallum）说，除了ChatGPT以外，Google的人工智能医学工具Med- PaLM，或许也能为病人提供堪比专业全科医生的问诊服务。
他预见社会即将发生变化，人们或将很快就能从Google医生或必应（Bing）护士获取医疗建议。