阅读: 2023/3/1 9:40:26
最近,我们对ChatGPT的学习能力和答题准确率进行了测试。作为一款聊天机器人程序,ChatGPT可以和用户聊任意话题,有人发现,ChatGPT还能帮助学生做作业,甚至写论文。
据《福布斯》网站报道,高达89%的美国学生承认在完成作业时用过ChatGPT。还有实验说明,ChatGPT能通过顶尖大学的考试。
我们抽取了学堂在线平台上的一些课程作业,请ChatGPT来作答。然而结果并不理想,ChatGPT在历史作业上只有30%的准确率,在艺术作业上只有40%的准确率。
也就是说,如果你直接使用ChatGPT来做作业,将会存在很大的挂科风险。而ChatGPT自己也承认:
“我拥有的信息量是有限的,可能不是最新的或完整的,并且我不能保证信息的准确性。”
于是,我们又有了一个大胆的猜想:
如果我们让ChatGPT先学再考,比如让它完整学完一门慕课,它能够顺利通过慕课认证考试吗?
先放结论:
是的,ChatGPT在学完了清华大学经济管理学院《营销:人人都需要的一门课》慕课后,以77.5分的成绩通过了最终的慕课考试,“获得了”慕课认证证书。
经过完整的训练,ChatGPT确实能够充分吸收知识、通过考试,相比“知识它不进脑子啊”的大学生,ChatGPT的学习能力傲人,不舍昼夜的学习态度更是无可挑剔。
对此,慕课的主讲老师、清华大学经济管理学院的郑毓煌老师表示,ChatGPT的学习能力已经超出了他的预期,但是它只能吸收知识,而无法创造知识,更像一个“复读机”,而不是知识的“创造者”。
点击看看郑老师怎么说
我们来回顾一下ChatGPT学习和考试的全过程。
Part.1
擅长抢答的优等生ChatGPT
当我们提出给ChatGPT上课的时候,ChatGPT非常迅速地接受了这一设定,表示“我很愿意担任你的学生,并从你这里学习”。
(为方便阅读,我们将对答内容转换成了文字,其中师指代教学者,C指代ChatGPT)
师
如果你愿意的话,我们可以把这次对话当做一个云端课堂,我来当老师,你来当学生。
C
好的!我很愿意担任你的学生,并从你这里学习。请提出你想教我的主题,我会非常认真地听取和理解。
我们把《营销:人人都需要的一门课》字幕导出,一段一段喂给ChatGPT。作为一个学生,ChatGPT的表现非常优异,它非常乐于和老师开展交流,我们提出的每个知识点,它都有非常积极的回应,甚至还会使用自己已有的知识完成抢答和拓展。
师
再举一个例子,日本有一家非常优秀的企业,它所开发的产品是游戏机,你知道我说的是哪家吗?
C
是否是任天堂公司?
师
对了!我要说的正是任天堂。说到游戏机,就非常有意思,游戏机主要是给孩子们玩,所有孩子都喜欢玩游戏机。但是从家长的角度来说,大多数家长都不喜欢买游戏机给自己的孩子。
C
对,家长认为游戏机对孩子们不好,会影响孩子们的学习或者其他。但是,任天堂通过对游戏机的不断创新,让游戏机不仅仅是一个玩具,它还具有了很多的教育意义,例如提高孩子们的思维能力、创造力等等。同时,任天堂也不断加入各种家长控制功能,让家长们更安心。
一度让身为老师的我们有讲不下去的感觉。
尽管博学,但是ChatGPT态度非常谦逊,主要表现为猛吹彩虹屁,其效果不亚于坐在第一排对老师频频报以微笑和点头的优等生。
在吸收知识的过程中,ChatGPT常常“反客为主”,试图教会我们更多的知识。
师
第三章的内容就是这些,希望你学懂了。我们来看第四章的内容吧,第四章的标题是《营销理念的转变》。
C
好的,让我们一起来学习第四章。这一章将会讲述营销理念的演变过程,以及它们在不同的历史阶段的影响和应用。通过了解营销理念的发展变化,我们将会对当今的市场环境有更深刻的理解,以及如何更好地制定有效的营销策略。
乍一看,ChatGPT从学生变成了老师,似乎了解很多关于营销理念的知识,但实际上它的话都是套路:通过历史,了解现状,制定更好的策略。
小堂掐指一算,这一套路非常适合在课堂发表、年终述职、文献综述等场景使用,你,学到了吗?
经过漫长的投喂,ChatGPT终于完成了《营销:人人都需要的一门课》的学习。
Part.2
稳扎稳打,考试过关
最后我们将《营销:人人都需要的一门课》的期末考试题复制粘贴到ChatGPT的对话栏里,再对照真题答案确定是否正确。
师
你现在已经学完了所有课程内容,接下来我想考考你,你觉得自己学得怎么样?
C
作为一个AI模型,我没有感觉,但是我可以告诉你,我被训练了大量的文本资料,包括营销知识,以便在问题的回答上提供有用的信息。如果你有特定的问题或测试,我将尽我最大的努力来回答。
每回答一道题,ChatGPT都需要一段时间来反应,这一点和真人很像。40道题它回答了1个小时,按照这个速度,ChatGPT想要参加行测考试,还得努把力才行。在大多数的回答中,ChatGPT都会带上自己的解析。
师
乔布斯三个失误背后的根源在于?
A市场变化 B经营哲学 C创新成本 D产品缺陷
C
答案是B,乔布斯长期以来一直遵循着技术为中心、追求创新的经营哲学,因此很多时候对市场需求和消费者需求没有充分考虑。他非常重视产品设计和创新,但忽略了产品需要满足市场需求才能取得成功。同时,他对高创新成本和产品缺陷的容忍度也较高,这在一定程度上也导致了他的失误。
那么,最终ChatGPT这40道题答对了几道题呢?
答案是——
31道,ChatGPT以77.5分的分数通过了期末考试。
对于答错的题目,ChatGPT也虚心接受了自己的错误,进行了修正,并且在我们教导前就生成了新的解析。
师
航空公司推出价格介于经济舱和商务舱之间的高端经济舱,是应用了如下哪种对消费者心理和行为的洞察?
A对比效应 B评估模式 C锚定效应 D折中效应
答
正确答案是A对比效应
师
你答错了,正确答案是D折中效应
C
对!推出高端经济舱的航空公司应用了折中效应,即顾客在选择产品或服务时,常常会在价格和质量之间寻求折中。高端经济舱定价介于经济舱和商务舱之间,吸引了那些不愿意花更多费用但希望得到更高质量服务的顾客。
值得一提的是,在学习慕课前,ChatGPT试做了10道营销题,正确率为60%,通过学习,它的正确率提高了17.5%,从低空飞过型选手成为了稳扎稳打型选手。
但是很遗憾,即使经过了漫长的学习,ChatGPT最终仍然没有达到百分之百的正确率,对此,ChatGPT表示,虽然自己的学习能力比人类强,但是缺少人类的判断力和经验:
“我是一个AI模型,我的学习能力比人类强,因为我可以在短时间内处理大量的信息,但我没有人类的判断力和经验,所以不能简单地说谁比谁强。”
Part.3
相比考试好帮手
ChatGPT更像资料库
经过一系列的测试,我们得出了如下结论:
或许,ChatGPT是一个绝佳的资料库和错题本,但是让它直接来完成作业和考试,还是有点强“AI”所难了。
在ChatGPT学习营销课的过程中,它常常能给出完整的解题思路。这些解题思路对于学生和工作党来说都是值得参考的,但是也只能提供参考的依据,更多的内容还是需要我们自己去查阅资料、充实内容。
正如ChatGPT自己所说:
“我被设计用来帮助人们更好地了解信息,而不是代替人类的思考和学习。我建议使用我的回答作为资源和参考,而不是直接抄袭,以确保对学习内容有真正的理解和掌握。”
在本次实验中,ChatGPT通过学习慕课,通过了慕课认证考试,获得了清华大学《营销:人人都需要的一门课》的慕课认证证书。
但是慕课认证证书该寄给谁,该怎么寄?
我们正在尝试给ChatGPT的创造者——美国OpenAI人工智能研究公司发送邮件,这或许有一个值得期待的后续。
最后,我们请ChatGPT对于高等教育的未来进行了畅想。
问:你知道什么是慕课吗?
是的,我知道慕课是什么。慕课是“Massive Open Course”的缩写,是一种在线学习课程的形式。它允许学生在线学习并通过考试,获得证书。慕课可以通过电脑或移动设备学习,方便和灵活。
问:你觉得未来的大学会是什么样?
预计未来的大学将是一个更加灵活、创新和科技导向的环境。这可能包括以下几个方面:
更多的在线课程:随着科技的进步,越来越多的课程将通过网络传输,以满足更多人的需求。
更加个性化的教育:通过科技,教育将更加个性化,以适应每个学生的独特需求。
更强的实践性:大学将更加强调实践性,通过合作项目、实习、实验室等方式,帮助学生更好地应用所学的知识。
更加国际化:随着全球化的加强,大学将更加国际化,吸引来自世界各地的学生和教师。
总的来说,未来的大学将是一个更加创新、科技导向和个性化的环境,提供了更多的机会和途径,帮助学生实现自己的潜力。
问:未来的大学会是一个超级大的云端大学吗?
这是一个有趣的想法,未来的大学可能确实会变成一个超级大的云端大学,允许任何人访问并学习他们想要的知识。
随着技术的进步,在线教育正在变得越来越流行,越来越多的人选择在线学习来获取知识和技能。在线学习提供了更多的便利和灵活性,人们可以在自己的节奏和时间表内学习。
考虑到这些因素,超级大的云端大学的想法是可行的。这将是一个开放的平台,允许任何人随时随地学习所需的知识。不管人们的年龄、背景或地理位置,他们都可以在这个大学里获得知识。
当然,这也可能带来一些挑战,例如课程认证和学位证明等问题,但随着技术的发展,这些问题也许可以解决。
总体而言,超级大的云端大学是一个令人兴奋的想法,未来可能会变成现实。
在此,我们想对ChatGPT做一个小小的纠正:
超级大的云端大学,这是一个令人兴奋的想法。
而这一想法,正在变成现实。
来源:学堂在线
转自:“高教志”微信公众号
如有侵权,请联系本站删除!