第七章测验编制的方法和步骤

第七章测验编制的步骤和方法拟定测验编制计划试测和测题筛选测验的评价第一节拟定测验编制计划教育测验多种多样，编制测验的方法，也相应依测验的性质而异。但是，不管什么样的教育测验，其编制过程一般均遵循类似的基本程序：测验目标与测验内容的确定；测验的设计；测验的技术分析；测验的鉴定或称测验的评价。一、确定测验的目的明确测验的有效性，就是要回答以下的问题：（１）测验所要测量的是哪一种属性？智力、能力倾向、人格还是学科成绩？（２）测验的对象是谁？测验的对象不同，对测题的选择和测题的形式要求不同？（３）测验的内容和范围是什么？是单纯某门学科测验还是综合测验？（４）测验的性质和用途是什么？是选拔性测验还是诊断性测验？是常模参照测验还是标准参照测验？是安置性测验、形成性测验、诊断性测验和总结性测验？第一节拟定测验编制计划二、教育目标与测验目标的确定确定测验目标是编制测验的必要前提。测验的编制要以预定的测验目标为基础。教育测验参加者是学生，测验目标就是学生受教育的结果，因此测验的目标就是教育目标。确定了教育目标，就意味着教育测验目标的确定。为了明确具体的测验目标，需要将教育目标进行具体而细致的分析。即对教育目标进行分类，对其内含的知识与能力作深入的心理与教育学的分析。对教育目标的分析，要借助于教育目标分类方法。常用的是布鲁姆的教育目标分类方法。第一节拟定测验编制计划布卢姆的教育目标分类层次关系，可以以下图来表示：教学目标的表述要具有可观察性和可测量性。一般要求教学目标表述时要包括三个基本要素：行为、条件、标准。如：高二学生在物体静止在斜面上、水平面和垂直面时，能正确标出所受的各种力的大小和方向。（3）设计测验蓝图为了让测验的取样对教学内容及教学目标有较好的代表性，既能覆盖教材的全部内容，又能反映各部分内容和认识层次的相对比重，应确定各部分内容和各认识层次测题数量的比率。这就是设计测验蓝图。测验蓝图一般用双向细目表来表示。第一节拟定测验编制计划一般需要通过双向细目表来确定以下几个问题：（１）确定每个教学内容在测验中的权重。教学内容的权重根据内容的重要程度，教学所需时间和其他一些因素确定。（２）确定每个教学目标在测验中的权重。教学目标的权重根据学科的特点，不同年级对学生的要求达到的目标层次的重要性确定。权重一般用百分比来表示。在实际测量中，有些某些内容的目标层次可能难于测量，这时可适当调配权重，但不要偏离教学实际太远。第一节拟定测验编制计划第一节拟定测验编制计划（4）确定测验时间限制应遵循几个原则：除速度测验外，要使被试以正常速度将测题全部做完；被试年龄越小，测验时间越应当短。测验的内容多，测验时间可适当延长。一般以能充分发挥考生的水平或能力而不至于出现作答疲劳为原则确定测验时限。（5）决定测题类型采用哪种题型要由测验目的、内容、规模及各种题型的特点决定。在选择测验题目的形式时，最好主客观题结合使用。因为主观题答题速度慢，不宜采取大题量，影响测验的长度，从而影响测验的信度；客观题答题速度快，可增大题量从而扩大测验的内容覆盖面，增加测验的内容效度，但客观题不易测量较高层级的教育目标。分析、综合、评价层次的教育目标一般以主观题为宜。第一节拟定测验编制计划第一节拟定测验编制计划（6）决定测题的数量与三个因素有关：题型、测验时间、所欲达到的信度和平均区分度。测验所采用的题型：主观题则少，客观题则多；阅读、计算和文字书写量；)1()1(ttxxxxttrrrrk测验信度和平均区分度达到某一定值时，测验长度的预测公式：)1()1(22ttititttrrrrK测验信度rxx从提高到rtt，测验长度增加的倍数的求解公式：其中，K表示测验应有的测题数量第一节拟定测验编制计划（7）决定记分办法１、客观题分数校正客观题中选择题、是非题等存在猜测的机遇，评分时要如需要可对分数进行校正。mkWRS)1(S是校正后的分数；R是做对题数；W是做错和没做的题数；K是选项数目；ｍ是每题的分数。２、主观题的评分评分方法：相对评分法；分析评分法第二节试测和测题筛选一、试测试测是在正式测验之前，将初步拟定好的题目对被试总体有代表性的样本（常模团体），按正式测验的要求进行预备测验。然后根据试测的结果，对测题进行整理、筛选和修改。１、试测的目的（１）找出有问题的测题。（２）根据试测结果估计每个测题的难度、区分度，并对选择题的选项进行分析，为筛选、修改测题和按不同难度比率拼题提供依据。（３）决定测验的题数和测验时限。第二节试测和测题筛选２、试测的步骤（１）试测前将测题在小样本中试用。（２）进行正式试测。（３）为检定整套测验再进行试测。３、试测的注意事项试测的对象应是具有代表性的常模团体；试测应按正式测验的要求进行；试测的时限要充分，要使每个被试都能完成每一道题目，使获得的每一道题目的资料都准确可靠；试测的题目要保密；要认真记录试测时被试的反映。二、测题分析及筛选（一）选择题分析第二节试测和测题筛选题号组别选项PD１２３４５１高分组０００20★０0.90.2低分组201161２高分组010★9010.65-0.30低分组216200３高分组23211★20.550低分组133112４高分组5★２８３２0.1250.25低分组0４11２３（二）测题难度和区分度的应用尽可能选择区分度在0.3以上的测题。根据测验的目的选择不同难度的题目。常模参照测验一般难度应在0.2—0.8之间，难度分布接近正态分布。为此，可将测题难度和区分度列成双向表，与测验难度分布计划进行比较，决定测题的筛选。根据测验的双向细目表考查所选测题是否符合测验内容和目标层级的分布要求。第二节试测和测题筛选第三节测验的评价一、评定测验的信度和效度二、建立测验量表三、编写测验说明书测验说明书是测验能正确、合理地实施与应用的保证。测验说明书应包括以下内容：（１）测验的编制人、编制时间、测验的法定权益（２）测验的目的和功能（３）测验选题的依据（４）测验的实施程序、时限及注意事项（５）测验的评分标准（６）测验分数解释的依据（７）测验的信度、效度资料，包括信度系数、效度系数及其估计方法。测验编制完成上述工作后，应由测验专家对测验进行鉴定。至此，测验编制完成。第三节测验的评价