使用 ChatGPT，学生可能会通过一门课程，但需要付费
假设学生将使用人工智能和 ChatGPT 等大型语言模型来完成家庭作业，伊利诺伊大学厄巴纳-香槟分校格兰杰工程学院航空航天工程系的研究人员着手了解免费版 ChatGPT 的比较效果如何 与人类学生一起参加为期一学期的本科控制系统课程。 结果：在简单的数学作业中，ChatGPT 获得了 A，但一些古怪的答案。 然而，在需要推理的更高级别问题上，它得到了 D。 “我们发现 ChatGPT 技术可以在结构化、简单的问题上获得 A。 在开放式问题上，它得到了 62 分，使 ChatGPT 的学期成绩下降到 82 分，即低 B。 人类学生的班级平均分是 84.85%，因为他们能够处理需要更高层次推理的问题，“博士说。 学生 Gokul Puthumanaillam。 该研究得出的结论是，一个付出最少的努力，毫不费力地学习材料，可以专门使用 ChatGPT，获得 B 并通过课程。 问题是及格分数可能是简单数学中的 A 和分析中的 D- 的组合。 他们没有学到太多东西。 “就像数学课上的计算器一样，ChatGPT 是一种将继续存在并且学生会使用的工具。 这项研究的结果向我指出，作为一名教育工作者，我需要进行调整，“Puthumanaillam 的顾问 Melkior Ornik 说。 “我计划考虑如何设计我的课程，以便随着时间的推移，我包含更多更高级别的问题，可能包括基于项目的作业。 学生仍将使用 ChatGPT 等程序来做更简单的数学问题，但通过添加更多开放式问题，他们也将达到更高水平的批判性思维并真正学习材料。 Puthumanaillam 表示，尽管 ChatGPT 在结构化问题上速度很快且基本正确，但谨慎使用是明智的。 “一个学生可能需要 20 分钟来回答问题。 ChatGPT 在不到 20 秒的时间内解决了它，但正确性有时值得怀疑。 他还描述了 ChatGPT 家庭作业中奇怪行为的例子，例如使用不适当的技术术语和说根本不真实的话。 “尽管我们为 ChatGPT 提供了所需的所有课程材料，但它仍然会产生幻觉，使用了课堂上从未使用过的准周期性振荡等词，在讲座或课程材料。 该研究考虑了选择付出最少努力的学生类型。 Puthumanaillam 表示，高级版 ChatGPT 解决分析问题的能力可能略强，并且可以存储更多内存来解决更长、更复杂的问题。 研究人员选择使用该软件的免费版本，因为普通学生可能不想花月费。 Puthumanaillam 指出，没有团队任务在课程中，ChatGPT 提示使用的语言与人类学生接收到的语言完全相同，并且都是同步进行的。 “当学生们做作业时，ChatGPT 也在做作业。 ChatGPT 只是班上的一个额外学生。 ChatGPT 是否从错误中吸取了教训？ “当我们告诉 ChatGPT 它在多项选择题上是错误的，给它正确的选项，然后是同一问题的变体，是的，它做得更好。 从某种意义上说，这是学习但总的来说，它停滞不前。 如果它在家庭作业中得分为 90%，那么它在学期结束时最终会得到 90 或 92 分。 这项工作得到了伊利诺伊大学厄巴纳-香槟分校格兰杰工程学院工程教学促进计划资助的支持。 航空航天教授 Tim Bretl 和博士 学生 Grayson Schaer 和 Pranay Thangeda 创建了项目环境，开发了课程材料和 PrairieLearn 基础设施。