分步增值评分——提高主观题评分质量的有效方法

PSYCH OpenIR > 健康与遗传心理学研究室

	分步增值评分——提高主观题评分质量的有效方法
其他题名	Multistage Rating Augmentation——An Effective Way to Improve Subjective Performance Rating
	刘斯佳 1; 张建新1
通讯作者邮箱	[email protected]
摘要	主观题特别是作文题评分的客观性和有效性存在着一定的问题,有必要通过优化评分流程降低作文评分的误差程度.本研究通过多面Rasch模型对500份国家级考试作文题的评分进行了分析,比较了分步增值评分模式和传统综合评分模式对评分成绩的影响.结果显示,相对于综合评分模式,分步增值评分模式对评分结果的分布和区分度更好、评分者在评分偏差程度指标上的表现更加理想.虽然作文题评分依然普遍存在着评分等级不一致的问题,但采取分步增值评分模式可以提高评分成绩的合理性,并且更好地控制评分者评分成绩间的差异.此外,这种评分模式还能有效提高评分程序的效率.
其他摘要	The objectiveness and validity of many subjective performance rating assessments，especially in terms of writing assessment，remained problematic． It is necessary to introduce better rating procedures to reduce the errors of writing assessment． This current study applied multifaceted rasch model( MFRM) to the rating scores of 500 national writing test papers to investigate the influences of the multistage rating augmentation pattern to the ratings scores，as compared to the traditional holistic rating pattern． Results suggest the multistage rating augmentation pattern performed better in terms of level distribution and discrimination， and reduced the level of rating errors． Although the rating scores of writing tests were still prevalently inconsistent， multistage rating augmentation pattern could perhaps enhance the reasonableness of the assessment scores，and better control for the rating variations between different raters． Besides，multistage rating augmentation pattern may also enhance the efficiency in rating procedure of writing tests．
关键词	作文分步增值评分综合评分多面rasch模型评分效率
学科领域	心理测量
	2015
语种	中文
发表期刊	心理学探新
卷号	35 期号:3 页码:266-271
期刊论文类型	期刊论文
URL	查看原文
收录类别	CSSCI
文献类型	期刊论文
条目标识符	http://ir.psych.ac.cn/handle/311026/20091
专题	健康与遗传心理学研究室
通讯作者	张建新
作者单位	1.中国科学院心理研究所 2.中国科学院大学
第一作者单位	中国科学院心理研究所
通讯作者单位	中国科学院心理研究所
推荐引用方式 GB/T 7714	刘斯佳,张建新. 分步增值评分——提高主观题评分质量的有效方法[J]. 心理学探新,2015,35(3):266-271.
APA	刘斯佳,&张建新.(2015).分步增值评分——提高主观题评分质量的有效方法.心理学探新,35(3),266-271.
MLA	刘斯佳,et al."分步增值评分——提高主观题评分质量的有效方法".心理学探新 35.3(2015):266-271.

条目包含的文件
文件名称/大小	文献类型	版本类型	开放类型	使用许可
分步增值评分_提高主观题评分质量的有效方（533KB）	期刊论文	作者接受稿	限制开放	CC BY-NC-SA	请求全文