检索结果-南通市图书馆

表现性评价中评分者信度估计方法的比较研究——从相关法、百分比法到概化理论

在线全文

学校读者我要写书评

暂无评论

心理科学 2005年第3期28卷 646-649页

作者：孙晓敏张厚粲北京师范大学心理学院北京100875

随着素质教育的推进,表现性评价受到越来越多的重视。影响表现性评价结果信度的一个重要因素是评分者之间的不一致。文章使用模拟数据,在对比评分者一致性的相关法、一致性百分比法和概化系数等各种估计方法的基础上,提出概化理论在表... 详细信息

随着素质教育的推进,表现性评价受到越来越多的重视。影响表现性评价结果信度的一个重要因素是评分者之间的不一致。文章使用模拟数据,在对比评分者一致性的相关法、一致性百分比法和概化系数等各种估计方法的基础上,提出概化理论在表现性评价中评分者信度问题上的应用是理论和实践发展的有益方向。

关键词：表现性评价评分者信度估计方法概化理论百分比法相关法素质教育重要因素评价结果实践发展一致性不一致

在线全文

学校读者我要写书评

暂无评论

档案袋评价中评分者信度的实证研究

应用心理学 2006年第3期12卷 258-263页

作者：赵群曹亦薇深圳大学师范学院心理系深圳518060

档案袋评价因能充分发挥促进学生发展和教学改进的功能而受到青睐,但不佳的测评信度和效度限制了其在教学评价中的应用。本文对档案袋评分者信度的特点进行实证研究,4位评分者对152份档案袋进行了2次等级评分,运用多种统计方法计算评分... 详细信息

档案袋评价因能充分发挥促进学生发展和教学改进的功能而受到青睐,但不佳的测评信度和效度限制了其在教学评价中的应用。本文对档案袋评分者信度的特点进行实证研究,4位评分者对152份档案袋进行了2次等级评分,运用多种统计方法计算评分者信度。结果表明,档案袋的评分有较高的关联性、中等偏弱的一致性和一定的稳定性,对档案袋整体水平的评分信度最高。本研究中,评分者个数为3时,对档案袋整体水平评分的概化系数和可靠性系数都在0.80以上。

关键词：档案袋评价评分者信度概化系数可靠性系数

在线全文

学校读者我要写书评

暂无评论

对评分者信度检验中零假设的更正

学科教育 2001年第11期 37-41页

作者：胡咏梅北京师范大学教育管理学院北京100875

我们通常采用Friedman双向秩次方差分析和Kendall和谐系数检验法来进行评分者信度检验。在绝大多数书籍中 ,此检验的零假设都被设置成“H0 :m个评分者对n个被评对象的评分是一致的”。但是 ,这一零假设是错误的。

关键词：评分者信度零假设 Friedman双向秩次方差分析 Kendall和谐系数教育评价

在线全文

学校读者我要写书评

暂无评论

相关法计算评分者信度应注意的问题

上海教育科研 1992年第1期 65-66页

作者：饶乐三南京师大教科所

一、问题的提出论文性试题的评分存在误差,这是由评分者的主观原因造成的。考察评分误差的方法常常是计算评分之间的相关度,从而估计评分误差对信度的影响,称为评分者信度。计算评分者信度一般有两种情况,一种是由两位评分者给许多被试... 详细信息

一、问题的提出论文性试题的评分存在误差,这是由评分者的主观原因造成的。考察评分误差的方法常常是计算评分之间的相关度,从而估计评分误差对信度的影响,称为评分者信度。计算评分者信度一般有两种情况,一种是由两位评分者给许多被试评分,或一位教师给许多被试评两次分数,计算两次分数之间的相关系数;另一种是许多位评分者给许多被试评分,或一位教师反复多次给许多被试评分,计算肯德尔和谐系数。肯德尔和谐系数实际就是多列变量间的等级相关系数。

关键词：评分者信度肯德尔和谐系数被试等级相关系数相关法衡量尺度主观理解固定偏差效度表极

初中英语口语测试信度的研究 ——以南京市某区初中英语口语测试评分者信度为例

在线全文

学校读者我要写书评

暂无评论

初中英语口语测试信度的研究 ——以南京市某区初中英语口语测试...

作者：任杰南京师范大学

学位级别：硕士

考查学生的英语口语能力是英语教学评价的重要组成部分之一，进行口语能力测试能提高对教学的反拨作用，促进学生英语综合能力的全面发展，在英语教学评价中实施英语口试势在必行。口语测试能够有效地测试、评估学生的运用英语进行口... 详细信息

考查学生的英语口语能力是英语教学评价的重要组成部分之一，进行口语能力测试能提高对教学的反拨作用，促进学生英语综合能力的全面发展，在英语教学评价中实施英语口试势在必行。口语测试能够有效地测试、评估学生的运用英语进行口头表达的能力，效度较高;但口语测试评分主要依靠测试员主观判断，测试员的业务水平、测试经验和个性特点等方面的存在差异必然影响测试员的评分，评分标准的掌握很难完全一致，因而控制评分者信度比较困难。本文在论述“英语口语测试信度”理论的基础上，报告了南京市某一区实施初中英语口语测试过程中，如何提高评分者信度的研究与实践，详细论述了影响评分差异的因素，提出提高英语口语测试评分者信度的途径与方法。通过口语测试与书面考试成绩的相关系数、克龙巴赫a信度系数、评分一致性的比例，验证了研究方法的有效性。

关键词：英语口试评分者信度差异分析

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

QH公司岗位评价评分者信度的概化研究

QH公司岗位评价评分者信度的概化研究

作者：王晓晗上海交通大学

学位级别：硕士

岗位评价是薪酬设计的基础。作为一种主观评价,其信度可用评分者信度表示。由于受到评价者自身特征、组织条件、外部环境和岗位特征等多种因素的影响,岗位评价结果中包含着各种误差。因此,辨明造成岗位评价误差的各种来源和影响程度,并... 详细信息

岗位评价是薪酬设计的基础。作为一种主观评价,其信度可用评分者信度表示。由于受到评价者自身特征、组织条件、外部环境和岗位特征等多种因素的影响,岗位评价结果中包含着各种误差。因此,辨明造成岗位评价误差的各种来源和影响程度,并采取相应的措施,以提高岗位评价评分者信度,具有重要的现实意义。但是,由于经典测量理论在误差分析中无法分辨误差来源等局限性,为我们探索岗位评价评分者信度的改善途径设置了障碍,而概化理论的出现解决了这一问题。概化理论作为一种新兴的现代测量理论,利用方差分析技术将各类误差进行分解,从而揭示了测量变异的影响因素和大小,为我们分析和控制测量误差的产生提供了可能。其独特的信度观可指导决策者在不同测量情境下选择最优的测量方案。本文应用概化理论对组织任职者和工作分析专家两类评价者在岗位评价中的信度表现进行了比较研究,并进一步探索了岗位评价信度提高的途径。本文对岗位评价评分者信度的研究采用了两种测量设计,并分别进行了概化研究和决策研究。研究一以岗位价值p为测量目标,报酬要素i和评价者r为侧面,采用随机双面交叉设计p×i×r;研究二以岗位各报酬要素价值f为测量目标,评价者r为测量侧面,采用随机单面交叉设计f×r。通过对559份岗位评价问卷数据的概化分析,我们发现工作分析专家显示了超越组织任职者的总体评分信度和各报酬要素评分信度。在岗位评价宽严标准的把握上,在对岗位的认知上,工作分析专家都表现出更好的一致性。除此之外,报酬要素的选择也显示了对岗位评价信度的重要影响。各报酬要素中,问题解决要素的信度水平最低。在决策研究中,组织任职者在评价人数为9人时,概化系数达到95%,工作分析专家在评价人数为6人时,概化系数达到95%。并且两类评价者都显现出评价信度和评价者人数的正相关性。但是,评分者数量在增加到一定程度时,概化系数的变化开始不明显。考虑到岗位评价的成本问题,在决策研究的基础上,本研究提出了在信度限制和成本限制条件下的两种评价者选择的最优决策模型。最后,本研究根据以上讨论的结果,提出了改善岗位评价评分者信度的四点建议,希望本研究的探讨能够为岗位评价在实际操作中测量的改善提供理论资料和参考依据。

关键词：岗位评价概化理论评分者信度信度

用多元概化理论（MGT）分析国家公务员录用面试中的评分者信度

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

用多元概化理论（MGT）分析国家公务员录用面试中的评分者信度

作者：严芳华东师范大学

学位级别：硕士

概化理论以其动态性、预测性的信度研究视角，借用试验设计和分析、方差分量模型等统计工具，为复杂、现实的多维度测量提供了可靠的信度分析。随着心理与教育理论发展的深入，诸多心理与教育测评都是复杂的多特质多维度的测量，为适应... 详细信息

概化理论以其动态性、预测性的信度研究视角，借用试验设计和分析、方差分量模型等统计工具，为复杂、现实的多维度测量提供了可靠的信度分析。随着心理与教育理论发展的深入，诸多心理与教育测评都是复杂的多特质多维度的测量，为适应多维度测量信度的要求，包容性更强、信息含量更大的多元概化理论(Multivariate Generalizability Theory)应运而生。多元概化理论的诞生在现代测量理论的发展中是具有里程碑意义的，是国际心理、教育测量领域的前沿课题。本研究探讨了这一先进而极富应用前景的现代测量理论模型，从多元概化理论的模型介绍，方差协方差分量的估计、解释，多元概化系数的计算，权重设定等方面较详尽地阐释了多元概化理论的内涵。多元概化理论非常适用于多维度的心理测评情境，为此本研究选用了极富代表性的国家公务员录用结构化面试的多维测评数据进行实证研究，在实行公务员面试的某省直国家机关中随机抽取5个部门共114名被试(应考者)，采用单变量概化分析和多元概化分析两项研究剖析了结构化面试的评分者信度。研究一将公务员结构化面试的五项测评要素作为固定侧面，分别对该侧面的五个水平进行单变量概化分析。研究二应用多元概化理论，对结构化面试五项测评要素上的综合评价进行评定误差分析和信度研究。两研究相比较，体现了多元概化分析较之单变量概化分析的优越性所在。多元概化分析的结果包含了单变量概化分析的全部信息，而协方差分量为评分者信度研究提供了额外的信息，研究利用多维度测评中协方差构成的侧面信息，探讨了在不同测评要素上评分者一致性存在的协变关系，以及测评要素以某种方式构成的特定组合的概化性等，对评分误差、评分者信度进行了较深入的理论探讨;此外，多元概化系数为各单位现行结构化面试提供了整体的信度水平指标，并以崭新的视角建立了测量信度和效度之间的关联。同时本研究也为完善国家公务员录用面试的测量设计、规范实施程序提供了极为宝贵的资料和理论依据。

关键词：多元概化理论方差协方差分量评分者信度国家公务员录用面试

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

评分者信度测量在护理研究中的应用

护理学杂志 2017年第19期32卷 110-112,F0003页

作者：史润泽李永刚康晓凤北京协和医学院护理学院北京100144

评分者信度作为常用测量评价指标之一,有助于控制测量误差,提高主观变量测量的精确性,在护理研究中被广泛应用。本文对评分者信度测量的概念进行澄清,介绍常用的基于经典测量理论的几种评分者信度测量方法,如Pearson积差相关、Cronbach... 详细信息

评分者信度作为常用测量评价指标之一,有助于控制测量误差,提高主观变量测量的精确性,在护理研究中被广泛应用。本文对评分者信度测量的概念进行澄清,介绍常用的基于经典测量理论的几种评分者信度测量方法,如Pearson积差相关、Cronbach′sα系数、Spearman相关、组内相关系数(ICC)、Kappa系数、Kendall和谐系数,并对评分者信度测量的应用及影响因素进行分析,以期为护理人员在科学研究中正确应用评分者信度测量提供参考依据。

关键词：评分者信度测量评价护理研究主观性测量影响因素综述文献

在线全文

学校读者我要写书评

暂无评论

评分者信度的分析方法简介及比较

中国现代医生 2007年第6X期45卷 76-77页

作者：何佳何惧席雁徐超国家医学考试中心北京100097

在教育测量理论中,主观性试题的评分误差较大,本文对评判主观性试题评分方法的可信度进行了分析,比较其评分者信度的分析方法的优劣,从而得出不管是经典测量理论还是概化理论,任何一种都不能用其他简单方法代替。

关键词：主观性试题评分方法评分者信度经典测量理论