OpenAI 的语言模型 ChatGPT 4.0 通过神经病学考试——未来临床应用的指标
Summary:
在海德堡大学医院和德国癌症研究中心的研究人员进行的一项研究中，OpenAI 的语言模型 ChatGPT 4.0 以 85% 的成功率成功通过了神经病学考试。该模型的表现优于人类的平均评分和旧版本，证明了其在神经病学临床应用的潜力。然而，需要更高认知功能的任务存在缺点，专家建议在实践中实施此类模型时要谨慎，而无需进一步改进。
OpenAI 的尖端语言模型 ChatGPT 4.0 通过在反映临床神经病学考试的测试中实现 85% 的成功率，证明了其在神经病学中的适用性。进行这项研究的海德堡大学医院和德国癌症研究中心的研究人员认为，再进行一些调整可以使这些模型在神经病学领域非常有用。审判结果于12月7日公布。在 5 月 31 日举行的测试中，美国精神病学和神经病学委员会提出了两个模型 ChatGPT 3.5 和 ChatGPT 4.0 的问题，以及欧洲神经病学委员会的一些问题。
与其前身 ChatGPT 3.5 相比，ChatGPT 3.5 通过正确回答 1956 个问题中的 1306 个获得了 66.8% 的分数，而更新后的版本 ChatGPT 4.0 通过正确回答 1662 个问题获得了令人印象深刻的 85%。这超过了人类平均表现的73.8%。4.0 模型在与行为、认知和心理学相关的问题中表现出色，有效地通过了神经病学测试，该测试将 70% 的分数视为通过的门槛。然而，与更简单的任务相比，当涉及到需要更高认知水平的任务时，这两个版本的能力都较差。
根据研究小组的说法，这些模型经过一些改进，可以极大地帮助临床神经病学。然而，由于在处理复杂认知任务方面的弱点，在常规实践中使用这些模型需要谨慎。该研究的作者之一 Varun Venkataramani 博士澄清说，这项研究主要代表了 LLM 的潜在能力，尽管它们仍然需要增强才能在神经病学中有效应用。
人工智能技术在医疗保健领域做出了重大贡献，包括协助阿斯利康发现癌症治疗方法，以及缓解香港抗生素过量处方的问题。
Published At
12/11/2023 4:57:53 PM
Disclaimer: Algoine does not endorse any content or product on this page. Readers should conduct their own research before taking any actions related to the asset, company, or any information in this article and assume full responsibility for their decisions. This article should not be considered as investment advice. Our news is prepared with AI support.
Do you suspect this content may be misleading, incomplete, or inappropriate in any way, requiring modification or removal?
We appreciate your report.