天才一秒记住【梧桐文学】地址:https://www.wtwx.net
第三节计算机化多阶段自适应测验的技术与算法
banner"
>
在MST中,当测验开发者设定好测验的基本要求如阶段数、模块数等时,如何将被试路由至下一阶段的模块中,以及如何组卷形成整个测验就成为其关注的重要问题。
本节将分别从这两个方面来进行介绍。
一、路由规则
在MST测验中,当被试完成一个阶段的模块后,如何选择下一阶段的模块,这就要根据路由规则来进行选择了。
根据阶段内不同模块的划界分数在测验开始之前是否预先设定好,可以将路由规则分为两种,静态路由规则和动态路由规则(Weissman,2014)。
静态路由规则是在测验开始之前就已经划分好路由到不同模块的划界规则。
当测验开始时,根据被试在前一阶段作答的情况,与下一阶段不同模块对应的划界区间进行比较,将该被试路由到与之相对应的模块。
例如,正确次数得分(,NC)和潜在特质(θ)。
这种路由规则存在一定的缺陷,比如在划界分数附近的被试可能存在路由不准确的问题。
动态路由规则是在测验进行的过程中动态决定的,而不是事先就决定好的。
这种路由方式会考虑被试在阶段一模块中被试的表现情况,然后结合阶段二中不同模块的特性来做出路由决定,选择下一阶段中的模块。
静态路由规则实现起来更为简单、方便,而动态路由规则却更加有效。
(一)静态路由规则
静态路由规则是在测验开始前已经预设好的,这种路由规则的关键在于划界分数的设定。
如图4-1-1中所示的MST测验,假设被试i完成路由模块后的临时能力估计值为θ1,设定s1和s2(s1<s2)为阶段二的两个划界分数。
若θ1<s1,则被试i被路由至模块1;若θ1>s2,则被试i被路由至模块3;否则,路由至模块2。
使用静态路由规则时,被试的能力估计值通常是基于NC值的,因此划界分数值也被表达为NC划界分数值,通常先标定θ量尺上相应的点,然后将该θ值映射到NC的划界分数的确定主要有以下两种方式,第一种是根据被试个体决定的,第二种是根据群体特征分布来决定的。
根据被试个体决定的路由规则可以使用近似极大信息量法(ApproximateMaximumInformation,AMI)。
这种方法使用累积测验信息函数(TestInformationFuns,TIFs),选择对被试产生最大信息量的模块,并且给出当前的临时分数,进而进行划界分数的确定和模块的选择。
AMI方法对相邻的模块进行成对估计,其使用类似于CAT的最大信息量准则,在θ量尺上找到两个模块之间的最佳决策点。
也就是说,根据TIFs的交叉点,作为选择决策点范围。
例如,图4-1-1所示的一次测验中,需要找到阶段二的两个路由点:θ1,根据(路由测验+模块1)和(路由测验+模块2)TIFs曲线的交点;θ2,根据(路由测验+模块2)和(路由测验+模块3)TIFs曲线的交点。
两个路由点一旦决定了,就可以根据路由模块的测验特征计算相应的估计分数,即计算
其中,P(θd;ζi)是某个特定IRT模型(如两参数IRT模型)的项目反应函数。
值得注意的是,路由点θ1和θ2以及近似的NC点x1和x2对于不同的模块可能会不同,除非TIFs和相关的测验特征曲线对于重复的模块在多个面板中完全一样(Luecht,Brumfield&Breithaupt,2006)。
根据群体特征分布决定的路由规则可以使用定义人口间隔法(DefiionIntervals,DPI)。
这种方法可指定群体中相关被试的比例。
例如,对于图4-1-1中所示的测验,如果需要群体中被试的比例近似相等的使用三种主要的路径(如路由模块+模块1+模块4,路由模块+模块2+模块5,路由模块+模块3+模块6),即通过每条路径的人数为33%。
本章未完,请点击下一章继续阅读!若浏览器显示没有新章节了,请尝试点击右上角↗️或右下角↘️的菜单,退出阅读模式即可,谢谢!