保捱科技网
您的当前位置:首页CAT

CAT

来源:保捱科技网
二、CAT的基本原理

要做到试题难度随考生能力不同而调整的测验方式,唯有实行自适应测试。而最适合在自适应测试中应用的,便是项目反应理论(IRT)。CAT是在项目反应理论基础上发展起来的一种测试,它是一种在项目水平上进行分析的测试。

在开始进行计算机化自适应测试之时,先由计算机终端机随机呈现一组测试试题,在考生做出反应之后,计算机便根据这些反应资料,估计出考生的初步能力估计值;然后,计算机会根据这些初步能力估计值,从现有的题库中挑选出最能对能力水平的估计发挥贡献力量的试题(通常这些试题的信息量也是最大),再呈现这些试题给考生作答。这样,随着被试做的题目增多,计算机对考生能力的估计精度越来越高,这种测试过程一直继续下去,直到事先预定的测试题已测完,或某种预定的能力估计值的测量精确性已获得为止。因此,实施计算机化自适应测试,不仅可以做到因材施测,也可以节省许多时间和成本。 三、CAT的编制

编制CAT系统一般具有以下过程: 1. 题库建设

题库不只是一堆试题的集合体,而是一堆经过校准、分析、归类与评鉴后,贮存起来的测验试题组合体。CAT题库建立主要有选择模型、题目的编制开发、题目参数的确定、题库的动态维护等步骤。题库需要满足测量各种不同能力水平的被试。 2. 参数估计

参数估计是根据采用的数学模型、Newton-Raphson迭代法对参数a、b、c和θ反复进行迭代,使其达到一定的精度。 3. 选题策略

计算机化自适应测试的最大特点就是计算机能根据被试能力的估计值,自动选择最适宜的项目给被试者,从而做到以较少题目,达到较高的测量精度,因此选题策略十分重要。 4. 选题方法

计算机化自适应测试施测第一题常选择题库中具有中等难度的题目,根据被试者反应结果,对被试者能力θ做出第一次估计,估计值为θ,常用的估计方法有极大似然法和贝叶士法。第二题的选择采用极大信息法,即选择能提供最大项目信息量的题目。

当被试者做完第二题后,计算机对被试者的能力θ做第二次估计,然后再选择能提供最大项目信息量的题目作第三题,如此选题,直到被试者能力θ的估计值达到一定的精度为止。 5. 曝光度控制

为了题库安全,必须考虑题目曝光度控制问题。所谓“题目曝光度”是指题目的使用率,用某题目使用人数除以测验总人数所得的商表示。项目曝光度控制就是在选题与给题中间加一个“过滤器”,“过滤器”的作用就是过滤掉曝光度超过预定限度的题目。

选题与曝光度控制在实际应用时是在同一程序中实现的。有时当一题目根据项目信息量的大小被选取后,经曝光度检查后不能使用,就会重现去选题目,再做曝光度检查,这样反复多次才找到合适的题目。 四、CAT系统的教学应用

自适应测试系统应用于教育教学的实践,改变了传统教学模式,在新课标背

景下由“先教后学”转变为学生的“先学后教”,逐步培养学生的自主学习能力、协作学习能力,使学生形成良好的网络在线学习习惯。

运用网络进行学习与传统上课相比,网络环境下的学习相对比较孤独,但是自适应测试系统的设计突出自适应、自主、协作的特点,使学习能够真正实现个性化、自主化、智能化,使传统的题海战术转变为“小步子”、阶段性自适应测评学习。学生在线协作学习有利于交流学习经验和互相学习,使其对知识的掌握更好、更快,增强了学生的学习效率和学习效益。自适应测试系统游戏性激励模块的设计寓教于乐,提高了学生在线学习的乐趣和积极性。不足的是对于自控能力较差的学生,由于上网过多在最初使用自适应测试系统时会出现上网成瘾等不良行为,但在同学的激励与教师、家长的共同监督下,会逐渐消失。

自适应测评系统在教学中的应用可以分为两种方式:

(1) 集中教学的方式:即采用在校内以课堂教学的方式。利用校园版测评系统在网络教室集中使用,这种方式教师可以在课堂上利用自适应测评系统讲解试题,对学生的做题结果进行实时点评,使学生得到“人”、“机”双方面的及时评价,有利于学生对知识的掌握。不足的是教师不可能对每个学生做出评价,因为课堂时间是不允许的。

(2) 分散学习的方式:就是学生利用网络版的测评系统在校外进行学习。教师可以以作业的形式给学生分配任务。学生在家里进行异步测评学习,教师通过网络也可以对学生的学习情况进行实时监控。教师以作业的形式分给学生任务和学生自愿登录自适应测评系统进行学习。在使用自适应测评系统之前学生基本是运用传统学习方法,很少在网络环境下进行学习。大多是在课堂上以教师讲解为主,以课本为主线进行学习,课外习题不是课本上的课后练习题就是利用一些配套辅导资料等。学生的学习缺乏灵活性、开放性,学生无法自主选择练习题的难易程度。导致学生出现不愿意写作业,甚至抄作业等不良的学习习惯及学习方法。使用自适应测评系统.学生不但在学习习惯、学习方法等方面产生较大变化,而且学生的自主学习能力、信息素养和技能方面也都有很大的提高。

虽然自适应测评系统对学生的学习有很大的帮助.但还存在许多问题。一方面.学习是一个循序渐进的过程。学生对自适应测评系统由不熟悉甚至不知道.到初步接触.再到熟练使用。不但学生的信息技术能力得到了提高,学生的自主学习能力、协作学习能力、信息素养等方面都有较大的提高。另一方面,采用分散式使用对学生的监控力度就会减弱,学生的自主学习能力本来就不高,在没有教师在身边监督的情况下.他们很难控制自己的学习进度和把握自己的学习方向。这就需要学生之间、教师、家长的共同监督以及学生提高自身的自主学习能力。 五、 CAT的发展

美国最先将CAT引入实际测试中,当前在美国,CAT在多个领域中已有了较为成功的应用,如GRE(研究生入学考试)、GMAT(工商管理研究生入学考试)等都已经采取了CAT的方式。在日本,凯思国际职业英语计算机测评系统(CASEC)已广泛应用于企业、学校和,成为日本职业英语能力评估的标准。它以IRT为理论基础,可以在较短的时间内以较少的试题准确地测试考生的实际能力。根据测定,CASEC考试只要25个题就可以使考试成绩的可信度达到96%,从而使考生做很少的题就达到考试的目的,节省了测评时间。 而在国内,比较成熟的则主要还是由国外的测试机构在进行,如GRE和Microsoft公司的MSCE认证等。从90年代中期开始,全国大学英语四六级考试委员会一直致力于IRT和CAT的研究与开发。目前,IRT已成功地用于CET分数等值处理过

程中,CAT题库也在建设和完善过程中,考试委员会将在不久后推出CET-4/6的CAT系统。

因篇幅问题不能全部显示,请点此查看更多更全内容