计算机|AI做题家卷疯了!高数考试正确率81% 竞赛题成绩超过计算机博士( 三 )


文章图片

经过分析之后,团队发现主要的错误形式来自计算错误和推理错误,只有小部分来自题意理解错误和在步骤中使用了错误的事实等其他情况 。
其中计算错误可以轻易通过访问外部计算器或Python解释器解决,但其他种类的错误因为神经网络规模太大就不太好调整了 。
计算机|AI做题家卷疯了!高数考试正确率81% 竞赛题成绩超过计算机博士
文章图片

总的来看,Minerva的表现让很多人感到惊艳,纷纷在评论区求API(可惜谷歌目前并没有公开计划) 。
计算机|AI做题家卷疯了!高数考试正确率81% 竞赛题成绩超过计算机博士
文章图片

有的网友想到,加上前几日让GPT-3解题正确率暴涨61%的“哄一哄”大法,它的准确率或许还可以再提高?
计算机|AI做题家卷疯了!高数考试正确率81% 竞赛题成绩超过计算机博士
文章图片

不过作者的回应是,哄一哄方法属于零样本学习,再强恐怕也比不上带4个例子的少样本学习 。
计算机|AI做题家卷疯了!高数考试正确率81% 竞赛题成绩超过计算机博士
文章图片

还有网友提出,既然它可以做题,那么能不能反过来出题?
计算机|AI做题家卷疯了!高数考试正确率81% 竞赛题成绩超过计算机博士
文章图片

事实上用AI给大学生出题这件事,MIT已经联合OpenAI在做了 。
他们把人类出的题和AI出的题混在一起,找学生来做问卷调查,大家也很难分清一道题是不是AI出的 。
计算机|AI做题家卷疯了!高数考试正确率81% 竞赛题成绩超过计算机博士
文章图片

总之现在的情况,除了搞AI的在忙着读这篇论文以外 。
学生们盼着有一天能用AI做作业 。
计算机|AI做题家卷疯了!高数考试正确率81% 竞赛题成绩超过计算机博士
文章图片

老师们也盼着有一天能用AI出卷子 。
计算机|AI做题家卷疯了!高数考试正确率81% 竞赛题成绩超过计算机博士
文章图片

【计算机|AI做题家卷疯了!高数考试正确率81% 竞赛题成绩超过计算机博士】计算机|AI做题家卷疯了!高数考试正确率81% 竞赛题成绩超过计算机博士
文章图片


推荐阅读