让GPT做SAT考试,能考多少分?
之所以会突然聊到这个话题,有两个原因:
1、同学们的技术加持真的是与时俱进。就像2000年初,我们上学的时候,还拿着电子翻译词典,查单词,向老师提问,动不动搞得老师焦头烂额一样,现在的学生,已经动不动用GPT快速查询SAT题目答案,并提问或质疑老师给出的答案了;
2、与系统开发的技术大哥交流。也是机缘巧合,最近与第三方SAT模考系统的技术大哥交流较多。他们刚刚在模考系统中,上线了中英文真题解析功能。26套阅读+15套数学,合计2000+个真题解析。也是借着这个机会,可以从一个较大的数量级,看一下用GPT解答SAT的准确度;
那么,2000+道模考系统里的SAT机考真题,GPT做得怎么样呢?
做对1700+道,正确率82.7%;
做错350+题,错误率17.3%。
也就是说,一套98个题(阅读54题+数学44题)的SAT机考题目,GPT会做错17个,预估分数1400-1420分。
更有意思的是,我们专门让模考系统负责答案校对的老师,做了错误率勘验,发现GPT的错题中,简单题目的错误较多,并不是模考系统本身的答案问题。阅读占比不到10%,语法占比将近40%,数学占比超过50%。典型的机器人思维,难题会做,简单题反而出问题概率更高。
为了验证数据的可靠性,我们专门找了2023年7月Open AI发布的用GPT做各种考试的成绩结果。可以看出,GPT-4 SAT考了1400+分,阅读部分超过93%学生,数学部分超过89%的学生,与我们的数据基本吻合。
详见文章:GPT-4已经考到SAT 1400+了,我们该怎么办?
小结
1、技术不是万能的,排斥技术是万万不能的
3-5年一波技术革命,能够感受到同学们应用新技术的适应性,所以,要学会亲近技术,而不是排斥。但是,同学们也要注意,盲信技术是不成的,要保持自己独立思考的能力。每一次做题,都是独立思考、批判性思维能力的展现。
2、注意变体题目的考查要点
同时,针对现有的SAT机考题目,大家务必注意变体题目的考查要点。现在的题目,尽管有30-40%的重复度,但大多是变体重复,文本框架不变,但背景、逻辑、提问方式,选项辨析,都会发生变化。CB恰恰是用这些变化,外加5-8%新题中的难题(在Module2 困难部分)出现,来筛选1500+分/1550+分的出分率。
因此,熟悉文本框架,但不盲从选项答案,具备独立思考能力,降低非必要错误率,就是8月考前,目标1500+分学生的复习重点。
由此,再次强烈推荐一个第三方SAT机考真题模考系统:
推荐一个全网题目最全的SAT模考系统
以我们书房SAT教研团队的信誉和严谨程度,在多次尝试验证这套模考系统的答案准确度后,发现都是100%。说明这套系统的背后,是有很专业资深的SAT教学团队背书的。只是人家很低调,不愿意对外宣传。