用信息函数法对标准参照测验作质量分析(3)
 |
| 第1页 |
 |
| 第6页 |
参见附件(774KB，6页)。
3.2.2 测验B项目分析
按前述确定项目质量标准的办法可知,因为本测验共有24道多级记分题,若以测验误差小于0.20即测验信息量达25为准,则对于2分题其信息量大于0.5的项目质量良好;信息量在0.5～0.32的项目其质量需修改;而信息量小于0.32的项目应删除重拟｡对于6分题当项目信息量在1.5以上质量良好;信息量在1.5～0.96间的应进行改进;信息量小于0.96的项目应删除重拟｡对于10分题而言,当其信息量大于2.5时质量良好;信息量在2.5～1.6之间的需改进;而信息量低于1.6的项目应删除重拟｡对于14分题当项目信息量达到3.5以上质量可视为良好;项目信息量在3.5～2.24间的应改进;信息量低于2.24的应删除重拟｡表5列出了测验项目的质量分类｡
从图6可看到,第1题(有3个难度等级)的区分度虽然较大,但项目信息量并没有在能力水平0.35上达到最大,而是在能力水平-0.8时信息量达到最大,因此要提高项目的质量就应加大难度至0.35左右;从图7第11题(有7个难度等级)的项目信息曲线图可看出其项目的区分度很小(只有1.1),且其信息量达到最大时的能力水平为-2.6, 因此要提高项目质量,则应加大项目的区分度,并提高项目的难度,使其信息量在能力水平0.35位置上达到最大｡在该测验质量需改进的6个项目中,需要提高区分度的项目有第11､12､13题;应加大难度的项目有第1､11､12､13､20､21题｡
4 小结与讨论
4.1 研究结论
通过以上对测验A和B的计量学分析可以看到,采用信息函数分析法能比经典真分数理论分析法得到许多更为丰富､深刻､直接服务于测验质量改进的资料:(1)能求得跟经典真分数理论分析结果相对应的项目难度､区分度以及估计标准误的值｡其中的项目性能参数是独立于样本的,而估计标准误可针对不同特质水平给出不同的估计误差,更为深刻实际｡(2)特别重要的是,采用信息函数分析法,能直接考察测验是否准确把握住了合格标准;如果不准确,能指出偏离的实况如何｡这一点则是经典理论所无法做到的｡(3)可直接根据准确掌握合格标准的要求,将测验所含全部项目进行性能优劣状况分类,并具体指出导致各项目性能不理想的实际原因,从而能就要增强区分力还是要调整难易度来提出切实建议｡所以,信息函数分析法有极强的行动指导效用｡总之,分析实践证明,项目反应理论的信息函数法具有显著优点和极强功能,值得认真重视｡在专用的计算机分析程序已然开发成功的情况下,更宜抓紧推广｡
4.2 需进一步研讨的问题
本研究所作的测验质量分析,是针对着在全国､全省大范围实施的标准参照测验来进行的,虽然很有必要,但完全未涉及常模参照测验的质量分析｡采用信息函数法来分析常模参照测验的质量,其具体标准与工作模式,应有自己的专门特点,所以是需要继续认真探讨的｡另外,更显得重要的是,本研究所作的测验质量分析,仅仅是进行了心理计量学的分析,并未涉及测验的内容覆盖面与能力结构是否合理等问题,故而即使计量学要求相宜也不能保证合格标准确属把握准确｡因此,把计量学分析与认知心理等实质心理学理论分析紧密结合,则应是今后更需大力深入探讨的问题｡
参 考 文 献
1 漆书青,戴海崎.项目反应理论及其应用研究.江西高校出版社,1992
2 漆书青,戴海崎,丁树良.现代教育与心理测量学原理.高等教育出版社,2002
3 漆书青等.计算机化自适应测验的编制与应用.江西教育科研,1999,2:64～66
4 漆书青等.现代教育与心理测量通用分析系统指导手册(出版中).2002
5 董圣鸿,马世晔.3种常用DIF检测方法的比较研究.心理学探新,2001,21(1):43～48
6 张厚粲.拮珠集.北京师范大学出版社,1998
7 张厚粲.承露集.北京师范大学出版社,1998
8 许祖慰.项目反应理论及其在测验中的应用.华东师范大学出版社,1992
9 Lord F M. Applications of Item Response Theory to Practical Testing Problems.Hillsdale,Nj:Erlbaum,1980
10 Hambleton R K, Swaminathan H. Item Response Theory: Priniciples and Applications. Boston: Kluwer, Nijhotf,1985
11 Suen H K. Priniciples of Test Theories. Hillsdale,Lawrence Erlbaum Associates,1990
12 Thissen D ......
您现在查看是摘要介绍页，详见PDF附件(774KB，6页)。