宾夕法尼亚大学沃顿商学院的一位教授在标记了 ChatGPT 为典型 MBA 课程的期末考试生成的答案后，给予 ChatGPT 理论上的 B 级通过。
沃顿商学院运营管理教授 Christian Terwiesch 表示，ChatGPT “在基本运营管理和流程分析问题上做得非常出色”。
“不仅答案正确，而且解释非常出色，”他在一份新的白皮书中写道。
另外：如何开始使用 ChatGPT
但他补充说，聊天机器人“在 6 年级数学水平的相对简单的计算中犯了令人惊讶的错误”，而且它目前无法处理更高级的过程分析问题。 另一方面，当前版本的 ChatGPT 可以根据人类提示修改其答案以得出正确的解决方案。
“考虑到这种表现，Chat GPT3 在考试中的成绩应该是 B 到 B-，”Terwiesch 写道。
Terwiesch 的几个问题旨在测试 ChatGPT 是否可以识别具有不同吞吐量的多台机器的处理操作中的瓶颈。
然而，ChatGPT 在使用中级算法进行计算时“犯了一个巨大的重大错误”。
有趣的是，ChatGPT 最初错误地回答了 Terwiesch 关于排队分析的问题之一。 他提示它提供更好的答案，而 ChatGPT 改进了它的答案。 第二天，教授在没有提示的情况下问了同样的初始排队问题——ChatGPT 在第一次尝试时就正确回答了。
“它要么能够从过去的反馈中学习，要么我只是走运，”他指出，并补充说其答案的质量似乎有些随机性。
Terwiesch 还发现 ChatGPT 能够设计出巧妙而幽默的问题，他可以在以后的考试中使用这些问题。 然而，聊天机器人还在一些问题中引入了微妙的缺陷，使他们无法回答。
另外：著名的科学期刊编辑说，ChatGPT“缺乏深度和洞察力”
Terwiesch 警告其他人注意 ChatGPT 的功能和限制。 他说，在阅读了 ChatGPT 对他的第一个问题的回答后，他“爱上了”它，但警告说它“在一些相当简单的情况下犯了重大错误”。
“对于复杂的问题，我们离 A+ 还很远，我们仍然需要一个人参与其中，”他写道。
“在我看来，一个小学生仍然需要学习 7 x 7 = 49 和宾夕法尼亚州的首府是哈里斯堡，尽管计算器已经被广泛使用了 50 多年，学生可以使用谷歌维基百科找到答案 对于大多数事实性问题。基础技能的本质是他们需要理解更高级的主题。”
Terwiesch 同意教育工作者应该担心 K-12 学生可能会使用 ChatGPT 在作业和考试中作弊。 例如，纽约市教育局最近禁止了聊天机器人，因为可靠的测试在教学中很重要，而技能认证不应该因为新技术而受到损害。 他指出，使用 ChatGPT 的学生就像能够打电话给具有“平均学术能力”的朋友来为他们完成考试。
但他也认为，ChatGPT 和类似技术有能力扮演“智能顾问”的角色——提供优雅但时常错误的答案，他认为这是培养需要的 MBA 学生技能的“完美训练场” 批判性地评估建议的替代方案。
