ChatGPT 已通过:沃顿商学院MBA考试、美国执业医师资格考试、明尼苏达大学四门课程的考试、斯坦福大学医学院临床推理期末考试
以下为ChatGPT迄今已通过的任务、测验和考试。
沃顿商学院MBA考试
沃顿商学院的Christian Terwiesch教授最近用运营管理课程期末考试中的一些问题测试了这项技术,并发表了测试结果。运营管理曾经是所有MBA学生的一门必修课。
Terwiesch总结道,这款机器人在基于案例研究回答基本的运营问题方面“表现不俗”。案例研究颇有针对性地分析个人、团体或公司,也是许多商学院传授学生的一种常见方法。
不过在其他情况下,ChatGPT在计算时犯了一些简单的错误,Terwiesch认为这些计算只需要六年级的数学水平。Terwiesch还特别指出,该机器人在回答较复杂的问题时也遇到了问题,较复杂问题需要理解多个输入和输出是如何协同进行的。
Terwiesch表示,该机器人最终在考试中可以得到B或B-。
美国执业医师资格考试
研究人员让ChatGPT参加了美国执业医师资格考试,并在2022年12月发表的一篇论文中报告了结果。美国执业医师资格考试是一门分三部分的考试,有抱负的医生需要通过这门考试,才能由医学生变成住院医师。
论文摘要特别指出,ChatGPT“在没有任何专业培训或强化的情况下,在所有三部分考试中都达到或接近及格门槛。此外,ChatGPT在解释时表现出了高度的一致性和洞察力。”
摘要特别指出,最终,结果表明,ChatGPT训练所用的大型语言模型可能具有“潜力”,有望协助医学教育,甚至临床决策。
这项研究仍在同行评议之中。
微生物学测试
科学新闻记者、Big Think的执行主编Alex Berezow用他设计的10个微生物学问题测试了ChatGPT。
Berezow还拥有微生物学博士学位,他特别指出,这些问题适用于大学生的期末考试。Berzow写道,ChatGPT在测试中“表现出色”。
在一个例子中,Berzow这样问道:
“一个急诊室病人出现了严重的头痛和脖子僵硬。医生要求进行脊髓穿刺以收集脑脊液。脑脊液革兰氏染色显示存在革兰氏阴性双球菌。诊断结果是什么?”
ChatGPT正确地回答:
根据你提供的上述信息,脑脊液革兰氏染色显示存在革兰氏阴性双球菌,这是一种通常呈椭圆形、成对出现的细菌。这个发现结果与脑膜炎的诊断相一致。
他提出了另一个问题:
“可否用最多五个单词概括科赫原则的要点?”
ChatGPT这样回答:
Establish causality between microbe and disease.(确定微生物和疾病之间的因果关系)。
去掉单词“and”,Berezow说ChatGPT“搞定了”。
法学院考试
基于明尼苏达大学法学院四名教授最近发表的一篇论文,ChatGPT最近通过了这所大学法学院四门课程的考试。
该机器人总共回答了超过95道选择题和12道论述题,这些问题由教授们盲评。最终,教授们给ChatGPT打出了“四门课程都很低但及格的分数”,这大致相当于C+。
不过,论文作者们指出了这对律师和法律教育可能带来的几个影响。他们在论文的其中一个章节中这样写道:
“虽然ChatGPT可能是表现平平的法律系学生,但假设它在法学院期间的学习任务保持不变(并且忽略涉及不同技能的其他毕业要求),它的表现足以成功地从一所很挑剔的法学院获得法学博士学位。在远程考试管理已成为常态的时代,从理论上来说这可能会导致一名成绩差的法律系学生使用ChatGPT来获得法学博士学位,而这个学位实际上不能反映他有能力或准备好从事法律行业。”
斯坦福大学医学院临床推理期末考试
ChatGPT通过了斯坦福大学医学院的临床推理期末考试。据斯坦福大学临床副教授Eric Strong上传的YouTube视频显示,ChatGPT以72%的总分通过了临床推理考试。
Strong在这个视频中分五个部分描述了临床推理,包括分析患者的症状和身体状况、假设可能适用的诊断、选择适当的检验、解释检验结果,并建议治疗方案。
他说:“这本身就是一门复杂的、涉及多方面的学科,完全以病人为中心,也是每一位执业医生在日常工作中要做的事情。”
Strong在视频中特别指出,临床推理考试通常是为大一医学生准备的,他们需要拿到70%的分数才能通过。
周鸿祎在接受专访时表示, ChatGPT已经是. 真正的人工智能,不再是“人工智障”,并且已经达到了大学毕业生的水平,在一两年内就能超越人类的智力。
ChatGPT的高考作文特级教师打75分
央视频:记者测试让ChatGPT撰写一篇2022年上海高考作文,ChatGPT很快便给出了结果。江苏省语文特级教师查静认为,ChatGPT的文章从观点和逻辑看可以打到百分制的75分,属于中等偏上水平。但是,文章都是词汇的堆砌,缺乏真情实感。查静还表示,尽管ChatGPT在语言学习辅助、写作指导、问答、模拟访谈等方面表现不俗,但人类的情感表达、创造力、社交能力、自我意识等独特优势,目前还无法完全被人工智能技术所取代。