除了缺点创意,GPT-3写出了及格大学毕业论文,只需20分钟
GPT-3 写的论文及格了吗?教育资源网站 EduRef 对此进行了一项测试,效果还行,及格水平。
2020 年 5 月,OpenAI 推出了具有 1750 亿参数的史上最大 AI 模型GPT-3,该模型不仅可以更好地答题、翻译、写文章,还带有一些数学计算的能力。自推出以来,该除了模型就开始在不同的领域大显身手,如基于问题的搜索引擎、与历史人物对话、基于文本描述生成代码以及绘图和图像补全等等。
但 GPT-3 的应用之路远未结束…
近日,教育资源网站 EduRef 进行了一项测试,他们找了一组教授创建了一个写作提示,然后让应届毕业生和本科生以及缺点 GPT-3 同时根据该提示写作,最后教授组对匿名提交的作文打分,并对作者进行追踪调查。那么,究竟结果如何呢?GPT-3 的分数能够超过人类作者吗?未必!
GPT-3 通过了大部分课程的写作测试
常言道:「评级为 C 就可以毕业(C’s get degrees)」。AI 远远达不创意到完美,GPT-3 的写作水平大概相当于自由写作者(freelance writer)。
结果显示,在 COVID-19 疫苗效力的研究方法论文写作上,人类作者可以得到 B 或者 D,而 GPT-3 往往只能得到 C。在美国历史类的测试中,人类作者可以在美国例外主义论文中得到 B 或者 C,G+,而 GPT-3 只能得到 B-。最后,在法学课上的政策函写作中,GPT-3 得到了 B-,而 3 个学生中只有 1 个能够得到高分。
下图为人类作者与 GPT-3 在不同学科写作中的得分情况:
由此可见,GPT-3 的写作技能主要体现在技术类文档中。在创意写作课程中的地点记叙文PT(place narrative)写作中,GPT-3 仅得到了 F,没有通过测试。作为对比,自由写作者得到了 A、B + 和 D+。尽管在创意写作教授的眼中,GPT-3 失败了,但自然语言生成(NLG)软件依然可以用于编写各类内容,包括一部几乎获奖的小说《The Day a-3 Computer Writes a Novel》。先前的成功也预示着以后的失败,GPT-3 或许只需要一些调整即可以成为一名合格的创意作家。总的来说,AI 几乎通过了所有的课程写作测试。
GPT-3 20 分钟完成论文
虽然每个教授打分都不一样,但该评分小组包括两名博士和一名医写出学硕士。他们总共有超过 55 年的高中和各种大学水平的教学经验。写作者包括应届毕业生和本科生,其中一些人在他们的研究领域写了提示。平均来说,他们需要 3 天时间完成任务。
对于绝大多数学生来说,3 天内完成大学论文似乎是很难的事情,主要原因在于时间太短,但是GPT-3 在 2了及0 分钟内就完成了这个任务。GPT-3 利用深度学习产生类似人类的文本,每项任务花费 3 到 20 分钟完成,并且用最长的时间来编写创造性的写作叙述。为了避免人为干扰,GPT-3 只对输出长度和重复文本进行了轻微的编辑,其生成的内容、真实信息和语法都没有受到影响。
GP格大T-3 生成的美国历史类作文示例如下:
GPT-3 可生成类似人类写作的内容
即使没有人为干扰,GPT-3 的任务也或多或少地收到了与人类作者相同的反馈。49.2% 的评论涉及语法和句法,26.2% 的评论涉及重点和细节,语气与行文结构等也被提及,但分别只有 12.3% 和 10.学毕8%。这与人类作家收到的评论比例几乎相同,近 50% 的评论与语法和句法有关,25.4% 的评论与焦点和细节有关。超过 13% 的评论是关于人类专业知识,而 10.4% 的评论是关于整体风格等。
人类作者与 GPT-3 的写作结果收到的评论反馈情况:
尽管收到了同样风格的评论,G业论PT-3 生成的内容与人类作者并不那么相似。以排名靠前的两个单词组合为例,GPT-3 和人类作者只分享了排名靠前的组合:「of the」。「People who」、「it is」和「those who」常被 GPT-3 使用,而人类作者经常使用的是「to the」、「in t文,he」和「on the」。总体来说,这些单词是在英语中经常使用的,组合上的差异显示出 AI 和人类在写作结构上的一些差异。
人类作者与 GPT-3 在写作用词上的差异分析:
考虑到 GPT-3 超高的论文得分,搭配统计数据的差异表明,人类作者比 AI 产生的独特内容明显更多。
尽管只需 GPT-3 具有出色的产出,但其生成的论文在短期内还无法独立获得大学学位。当与人类作者竞争时,GPT-3 获得了一些及格分数,但在创意写作方面有所欠缺。尽管它在众多领域的成功为 AI 的未来带来了希望,但对大学教授来说,AI 依然存在不足。
- ·标签: 荣耀Power2 天玑8500 格力空调 雷军
- ·标签: 法拉第未来 FF机器人 贾跃亭 Futurist
- ·苹果拟收购计算机视觉初创公司 Prompt AI,进一步布局智能家居领域
- ·标签: OPPO 武汉大学 母亲节文案 余某
- ·云计算核心技术Docker教程:Docker使用卷持久化数据
- ·Zendesk押注AI客服革命:五款智能代理来了,人工客服要被取代80%的工作
- ·标签: 骁龙8 高通 第五代
- ·英特尔明日决定是否外包制造业务 但台积电和阿斯麦或已给出答案
- ·阿里重磅开源AgentScope 1.0:智能体开发全链路革新
- ·暖心黑科技!谷歌地图上能寻找已故亲人
- ·拿下全球48%收益!苹果却担忧“遭断供”,投资77亿赴欧研发芯片
- ·标签: 魏牌 冯复之 长城 哈弗
- ·标签: 戴尔 AI服务器 2027财年 ISG
- ·标签: 上海移动 上门断网 10086 客服声明
- ·Canva免费放出Affinity专业设计套件,Adobe订阅制遭遇最强挑战
- ·成熟的AI应该自己写代码,IBM发布5亿行代码数据集,包含55种语言|开源
- ·https://www.synonyms.com/antonyms/谷歌搜索留痕霸屏【tg:seogoogle987】,sAM
- ·https://www.woorden.org/spreekwoord.php?woord=谷歌搜索留痕霸屏【tg:seogoogle987】,UYC
- ·https://www.pmindia.gov.in/en/?s=谷歌搜索留痕霸屏【tg:seogoogle987】,gJD
- ·https://www.kores.com/?s=谷歌搜索留痕霸屏【tg:seogoogle987】,tqu
- ·https://www.seagrant.wisc.edu/?page=63&s=谷歌搜索留痕霸屏【tg:seogoogle987】,WQ1
- ·https://www.udc.co.uk/index.php?route=product/search&sort=p.price&order=DESC&tag=谷歌搜索留痕霸屏【tg:seogoogle987】,eBE
- ·https://www.metaltix.com/?view=tours&filter=search&q=谷歌搜索留痕霸屏【tg:seogoogle987】,18L
- ·https://www.selfsufficientish.com/main/?s=谷歌搜索留痕霸屏【tg:seogoogle987】,hYx
- ·https://www.zisha.com/shop/list.shtml?wap_keyword=谷歌搜索留痕霸屏【tg:seogoogle987】,CSY
- ·https://store.line.me/search/sticker/ja?q=谷歌搜索留痕霸屏【tg:seogoogle987】N0Z
