2020 年 5 月，OpenAI 推出了具有 1750 亿参数的史上最大 AI 模型 GPT-3，该模型不仅可以更好地答题、翻译、写文章，还带有一些数学计算的能力。自推出以来，该模型就开始在不同的领域大显身手，如基于问题的搜索引擎、与历史人物对话、基于文本描述生成代码以及绘图和图像补全等等。
但 GPT-3 的应用之路远未结束…
近日，教育资源网站 EduRef 进行了一项尝试，他们找了一组传授创建了一个写作提醒，然后让应届毕业生和本科生以及 GPT-3 同时根据该提醒写作，最后传授组对匿名提交的作文打分，并对作家进行追踪调查。那么，究竟结果如何呢？GPT-3 的分数能够超过人类作家吗？未必！
GPT-3 通过了大部分课程的写作尝试
常言道：「评级为 C 就可以毕业（C’s get degrees）」。AI 远远达不到完美，GPT-3 的写作水平大概相当于自由写作家（freelance writer）。
结果显示，在 COVID-19 疫苗效力的研究方法论文写作上，人类作家可以失去 B 或者 D，而 GPT-3 往往只能失去 C。在美国历史类的尝试中，人类作家可以在美国例外主义论文中失去 B 或者 C+，而 GPT-3 只能失去 B-。最后，在法学课上的政策函写作中，GPT-3 失去了 B-，而 3 个学生中只有 1 个能够失去高分。
下图为人类作家与 GPT-3 在不同学科写作中的得分情况：
由此可见，GPT-3 的写作技能主要体现在技术类文档中。在创意写作课程中的地点记叙文（place narrative）写作中，GPT-3 仅失去了 F，没有通过尝试。作为对比，自由写作家失去了 A、B + 和 D+。尽管在创意写作传授的眼中，GPT-3 失败了，但自然语言生成（NLG）软件依然可以用于编写各类实质，包括一部几乎获奖的小说《The Day a Computer Writes a Novel》。先前的成功也预示着以后的失败，GPT-3 或许只需要一些调整即可以成为一名合格的创意作家。总的来讲，AI 几乎通过了所有的课程写作尝试。
GPT-3 20 分钟完毕论文
虽然每个传授打分都不一样，但该评分小组包括两名博士和一名医学硕士。他们总共有超过 55 年的高中和各种大学水平的教学经验。写作家包括应届毕业生和本科生，其中一些人在他们的研究领域写了提醒。平均来讲，他们需要 3 天时间完毕恣意。
对于绝大多数学生来讲，3 天内完毕大学论文似乎是很难的事情，主要原因在于时间太短，但是 GPT-3 在 20 分钟内就完毕了这个恣意。GPT-3 利用深度学习产生类似人类的文本，每项恣意花费 3 到 20 分钟完毕，并且用最长的时间来编写创造性的写作叙述。为了避免人为干扰，GPT-3 只对输出长度和重复文本进行了轻微的编辑，其生成的实质、真实信息和语法都没有受到影响。
GPT-3 生成的美国历史类作文示例如下：
GPT-3 可生成类似人类写作的实质
即使没有人为干扰，GPT-3 的恣意也或多或少地收到了与人类作家相同的反馈。49.2% 的谈论涉及语法和句法，26.2% 的谈论涉及重点和细节，语气与行文结构等也被提及，但分别只有 12.3% 和 10.8%。这与人类作家收到的谈论比例几乎相同，近 50% 的谈论与语法和句法有关，25.4% 的谈论与焦点和细节有关。超过 13% 的谈论是关于人类专业知识，而 10.4% 的谈论是关于整体风格等。
人类作家与 GPT-3 的写作结果收到的谈论反馈情况：
尽管收到了同样风格的谈论，GPT-3 生成的实质与人类作家并不那么相似。以排名靠前的两个单词拉拢为例，GPT-3 和人类作家只分享了排名靠前的拉拢:「of the」。「People who」、「it is」和「those who」常被 GPT-3 使用，而人类作家经常使用的是「to the」、「in the」和「on the」。总体来讲，这些单词是在英语中经常使用的，拉拢上的相反显示出 AI 和人类在写作结构上的一些相反。
人类作家与 GPT-3 在写作用词上的相反分析：
考虑到 GPT-3 超高的论文得分，搭配统计数据的相反表明，人类作家比 AI 产生的独特实质明显更多。
尽管 GPT-3 具有出色的产出，但其生成的论文在短期内还无法独立获得大学学位。当与人类作家竞争时，GPT-3 获得了一些及格分数，但在创意写作方面有所欠缺。尽管它在众多领域的成功为 AI 的未来带来了希望，但对大学传授来讲，AI 依然存在不足。
原文链接：https://www.eduref.net/features/what-grades-can-ai-get-in-college/