心理测量-第8章-心理测验的编制

第八章测验的编制编制测验的一般程序确定测验目的与计划设计测试项目项目的测试和分析合成测验测验使用的标准化及编制使用说明确定测验目的测验对象即这个测验编成之后将要用于哪些团体和个人。测验目标测验目标是指所编测验是用来测量什么心理变量或者行为特征的。测验用途（功能）所编出的测验是要对被试做描述，还是选拔、预测或者诊断。测验用途或功能不同，在编制题目的取材范围和试题难度都有差别。拟定编制计划编制计划，实际上就是对测验的总体设计，指出测验的内容结构和项目形式等，以及对每一个内容、目标的相对重视程度。一般采用双向细目表呈现。表2-1小学自然常识测验编题计划获得基本知识理解原理原则应用原理原则分析因果关系综合成系统见解建立评价标准合计生物世界35632120资源利用23321010动力和机械23410112物质、物性与能量56832125气象24322013宇宙25410012地球2221108合计1828301383100双向细目表中两个维度的具体内容，因所编制测验的性质不同而不同。在学科测验中，横向维度一般表示教学目标，纵向维度一般表示教材内容。在心理量表编制中，如果一个维度表示测量目标（心理特质），那么，另一个维度就表示外显行为。测验计划的用途在编制阶段，测验计划指出应该编多少和编哪些种类的项目；项目编好后，可将项目的实际分布情况与测验计划对照，以确定测验项目是否恰当地代表了所要测量的领域，核对重要方面的内容是否遗漏。在记分时可按表中百分比确定每类项目的分数。产生测题产生测题就是编辑测验的项目或题目。产生测题一般包括收集测验有关资料，选择测题的形式，编写、修订测题等工作。产生测题的过程搜集有关资料选择项目形式编写和修订项目搜集有关资料1.资料要丰富有关所要测量的心理特质的理论同行已经编制的有关测量这种心理特质的国内外量表访问专家、教师、在一线工作的有关人员，征求他们的意见，收集与测题有关的资料了解受测群体的实际情况2.资料要有普遍性所选择的材料应该具有文化公平性。如，对于智力测验来讲，所收集的资料对于不同文化背景、不同经济地位、不同地区的个人和团体应该是公平的。测验编制经验丰富者在编制测题时，往往会考虑以下几个测题的来源：已出版的标准测验；理论和专家的经验；临床观察和记录选择题目形式（第二节详述）考虑以下几点测验的目的和材料的性质接受团体的特点各种实际因素编写并修订题目编写题目应注意的问题题目的范围要与测验计划所列的双向细目表一致题目的数量要多一倍甚至几倍，以备删选和编制复本题目的难度必须符合测验目的和需要题目的说明必须清楚明白项目的试测和分析初步筛选出来的项目虽然在内容上和形式上符合要求，但是否具有适当的难度与鉴别作用，必须通过实践来检验，也就是要通过预测进行项目分析，为进一步筛选项目提供客观依据。试测即预备测验，在测验时应注意以下问题预测对象应来自将正式测验准备应用的群体实施过程与情境应力求与正式测试时的情况相近预测时限可稍微宽松一些，最好使每个被试都能将项目完成，以搜集比较充分的反应资料，使统计结果更为可靠在预测过程中，应随时记录被试的反应情形项目分析对项目的分析包括质的分析和量的分析两个方面。质的分析是从内容取样的适当性、题目的思想性以及表达是否清楚等方面加以分析。量的分析是对预测结果进行统计分析，确定项目的难度、区分度、备选答案的适宜性等。编制一套测验，只依据一次预测的结果所做的项目分析是不够的。由于预测的被试样本可能会有取样误差，故由此得到的项目分析结果未必完全可靠。为了检验所选出的项目的性能是否真正符合要求，有时需选取来自同一总体的另一样本再测一次，并根据结果进行第二次项目分析，看两次分析结果是否一致。如果某个项目的测试结果前后相差较大，说明该项目的性能值得怀疑。这种在两个独立样本中进行项目分析的过程叫做复核。ReliabilityStatisticsCronbach'sAlphaCronbach'sAlpha.309删除13、16、20题后的结果合成测验项目的选择项目的编排编造副本项目的选择在选择项目时，不但要考虑项目分析所提供的资料，还要考虑测验的目的、性质与功能。最好的项目，就是只测定所需要的特征，并能对该特征加以有效区分的难度合适的项目。一般来说，项目的区分度越高越好，这是选择项目的一条重要标准。特别是对于选拔测验，此标准尤为重要。选择项目的另一个指标是难度。难度多大为合适并无一个绝对的标准，而要根据测验目的来确定。有的要求难一些，有的则要求容易一些，有的可不考虑难度。根据项目分析资料选出的项目，还要与测验计划再次对照，看看材料内容以及所测量的行为目标是否与计划相符，必要时加以适当调整。此外项目的数量还必须适合于所限定的时间。项目的编排项目选出之后，必须根据测验的目的与性质，并考虑被试作答时的心理反应，加以合理安排。测验项目常见的排列方式并列直进式混合螺旋式编造复本为增加实际的效用，一种测验有时需要有两个以上的等值型，称作复本，复本越多，使用起来越便利。测验的各份复本必须等值，所谓等值需符合下列几个条件：各份测验测量的是同一种心理特质各份测验包含相同的内容范围，但题目不应有重复各份测验题型相同，题目数量相等，并且有大体相同的难度分布只要有足够数量的题目，编造复本的手续是很简单的。先将所有适用的题目按难度排列，其次序为1、2、3、4、5、6……如果要分成两个等值的测验本，可采用下面的方式：A本：1、4、5、8、9、12、13、16、17…B本：2、3、6、7、10、11、14、15、18…如果要分成三个等值的测验本，可采用下面的方式分：A本：1、6、7、12、13、18、19、24…B本：2、5、8、11、14、17、20、23…C本：3、4、9、10、15、16、21、22…采用上面的分法可使复本之间在难度上基本相等，从而获得大体相同的分数分布。复本编好后，应该再试测一次，以判定各本是否等值。测验使用的标准化一套好的题目并不一定是一个好的测验。对于测验的基本要求是准确、可靠。为了减少误差，就要控制无关因素对测验目的的影响。这个控制的过程，称做标准化，包括测验编制的标准化和测验使用的标准化两个方面。制作过程的标准化可保证量具本身符合要求，而使用过程的标准化可保证操作规范，使用得当。测验使用的标准化又可分为测验内容标准化、施测过程标准化、评分计分标准化、分数解释标准化。施测过程尽管对于所有的被试使用了相同的题目，如果在施测时各行其是，所得的分数便不能进行比较。为了使测验条件相同，必须有统一的指导语和时间限制。指导语给被试的指导语属于测验刺激的一部分，它的内容通常包括对测验目的的说明和被试应该如何反应的指示（包括如何选择反应、记录反应以及时限等）。对于纸笔测验来说，这些指示一般印在测验的开始部分，也可以印在另外一张纸上。要求简单明确，不引起误解。如果题目形式对被试是生疏的，还应该有一些例题。为了保证测验情境的一致，还要有对主试的指导语，主要是对测验细节作进一步的解释，以及其他一些有关事项，包括测验房间场地的安排（照明、桌椅、隔音、温度等）测验材料的分发，如何计时、计分、对被试的各种提问如何回答，以及在测验中途发生意外情况应该如何处理。时限确定测验的时限，要考虑施测条件和实际情况的限制，以及被试的特点（如对儿童、老人、病人施测时间不宜过长），不过更重要的是考虑测量目标的要求。通常所用的时限是使大约百分之九十的被试能在规定时间内完成全部测验。如果题目由易到难排列，应使大多数在规定时间内完成他会回答的问题。评分、记分为使评分尽可能客观，有三点要求及时而清楚地记录反应情况。特别是对口试和操作测验，此点尤为重要，必要时可以录音和录像要有一张标准答案或正确反应的表格，即计分键将被试的反应和记分键比较，对反应进行分类无论采用何种评分方法，都必须符合客观、准确、经济、实用四项原则分数评出后还要进行合成计算，即将各题目分数合成分测验分数，再将分测验分数合成测验总分数。准确无误是对计分的基本要求。分数解释一个标准化测验，不但编制、施测和评分要标准化，对分数的解释也必须标准化，如果同一个分数可做出不同的推论，测量便失去了客观性。常模参照测验分数的解释标准参照测验分数的解释无论哪种测验，都要参照某个系统对原始分数加以转换，才能做出有意义的解释。搜集信度、效度资料测验编好后，必须对其测量的可靠性和有效性加以评估，为此就要进行测量学方面的分析，搜集信度和效度资料。编制测验手册为使测验能够合理地实施与应用，在正式测验编制完成后，还要编写一本手册，就下列问题作出详尽而明确的说明：本测验的目的和功用测验的理论背景以及选择项目的根据测验的实施方法、时限及注意事项测验的标准答案和记分方法常模表或其他有助于分数转化与解释的资料测验的信度、效度资料，包括信度系数、效度系数以及这些数据是在什么情境下得到的第二节测验项目的编制项目编制的基本原则科学性原则目的性原则代表性原则合理性原则经济性原则项目编制的具体要求题目格式应明确具体，不要让被试误解题目之间彼此独立，不可互相重复或牵连题目文句要简明扼要，题目意义必须明确，不能含糊题目不可含有暗示本题或其他题正确答案的线索所题问题应避免涉及社会禁忌与个人隐私题目应有确切答案题目难度适宜尽量做到施测与评分省时客观性试题的编制要领客观性试题又称固定应答型试题，是让受测者从测验编制者事先定好的答案中辨认出正确答案（成就测验、教育测验）。包括选择题、是非题、匹配题等。客观题的优缺点优点：评分简单准确；适合测量记忆、理解、应用、分析等几个层次的认知目标；保证所测内容的覆盖率和代表性。缺点：编制测验花费时间和精力较多；不适合测量被试综合、评价等高层次的认知目标；在答题时难以排除猜测。选择题选择题在结构上由两部分组成：一为题干，以直接问句或不完全陈述句的形式出现；另一个为选项，包括1个正确答案和3—5个错误答案，或若干个正确答案和若干个错误答案，前者称为单选题，后者称为多选题。文字、图形、数字等不同性质的测验材料都可以采用选择题的形式，它可以考察被试记忆、鉴别、分析、理解、推理和应用等多种能力，因而在标准化心理与教育测验中用的很多。请你选择一种喜欢的颜色——绿色茶色紫色蓝色红色白色黄色智力测验（主要是测量推理能力）编制中使用的选择题（1）猫头鹰是鸟正如白鲨是——a动物b鱼类c鸟类d爬行动物（2）平地与土丘的关系就如同峡谷与——的关系。a沟壑b山谷c丛林d河流e高山无正确答案在设计选择题时应注意以下问题：（1）题干所提的问题必须明确，尽量使用简单而且明晰的词语，做到题干意义完整，即使被试不看选项亦能完全理解。（2）选项要简明扼要，切忌冗长。选项中共同的词语删掉，放到题干中去，可使题意更明确，同时减少被试看题时间。例：牛顿最伟大的贡献在（）。A生物学方面B物理学方面C社会学方面D经济学方面（3）单项选择中每题只给一个正确答案，其他属诱答。若是找最合适的答案，应用这样的问句：“下列答案中哪个最合适？”以免引起困惑。（4）各选项长度应相等，尽量不要有长有短。同时，选项与题干的联系要非常密切。诱答也必须一致，以免被试很容易就排除了诱答项目。例：黄河发源于（）。A甘肃B西藏C浙江D四川（5）选项最好用同一性质和形式，如同为人名、地名、数字、时间等，长度最好相等。例：法国的首都是（）。A伦敦B巴黎C1792D阿尔俾斯山（6）正确答案应随机排列，避免出现规律。优点：适用范围广，既可以适用于文字和数字的材料，也可以适用于图形的材料；评分简单、省时、客观；相比于判断题更少受猜测因素的影响。缺点：编拟迷惑答案比较困难；无法测量出被试的言语表达能力和概括、组织能力，这与简答题、论述题相比是不足的；尽管选择题减少了机遇的影响，但猜测的影响仍然不能完全排除。判断题喜欢在大庭广众之下发表自己的见解。是否你常常主动给朋友写信或打电话吗？是否编制判断题应注意以下