您好,欢迎访问三七文档
问卷的编制及使用一问卷编制的一般程序一、问卷编制的步骤(一)确定测验目的1、测验的目标和假设所编的测验是用来测量什么的?是测能力、人格还是工作绩效?不但明确测量的目标,还要对测量目标加以分析,将此目标转化为可操作的属于,即将目标具体化。2、测验对象测验对象的年龄、智力水平、文化背景、阅读水平。3、测验用途测验是用来对被试做描述,还是诊断(员工满意度调查,员工对公司的满意度状况是属于描述,影响员工工作满意度的因素很多,究竟是什么原因,需要诊断才知道),选拔还是预示?(二)拟定编制计划此份计划包括决定应搜集哪些相关的资料、编制的进度、样本的选取、经费预算、编制完成所需的时间等。(三)搜集资料1资料要丰富、有代表性2资料收集方法:开放式调查、访谈、已有研究、(观察法)(四)拟定量表的架构编制者可以参考某一个学者的看法,或是综合数个学者的理论拟出所要编制量表的架构。以大五人格为例。(五)编制题目当量表的架构定出来之后,编制者即可参考所搜集来的其它的量表资料来编题。通常为了将来有删题的空间,编制者大约要比预定的题数多编二分之一的题目。如一个分量表若需要10题,此时就需编15题。如果问卷的选项过于敏感,应在问卷中穿插数题“测谎题”,以探知被试是否据实回答。态度量表通常采用李克特式量表法,量表填答方式以4点量表法至7点量表法。最为研究者采用。题目的编写应注意以下几点A针对题目内容1要求题目的内容符合测量工具的目的,避免贪多而乱出题目2内容取样要有代表性,符合测量工具计划的内容3各个试题必须彼此独立,不可互相重复或牵连,切忌一个题目的答案影响对另一个题目的回答B针对题目语言的原则1使用准确的当代语言,不要使用孤僻艰深的词句2文句需简明扼要,既排除与解体无关的陈述,又不要遗落解题的必要条件3最好一句话说明一个概念,不要使用两个或两个以上的观念;4意义必须明确,不得暧昧或含糊,尽量少使用双重否定句。C针对题目表达的原则1尽量避免主观性和情绪话的字句;2不要伤害被试感情,避免涉及社会禁忌或隐私3避免诱导和暗示答案4避免令被试为难的问题(被试没有明确结论或羞于启齿的问题)D针对题目理解的原则1题目应有确切答案,不应具有引起争议的可能(创造性测验、人格类测验例外)2题目内容不应超出受测团体的知识和能力范围3题目的格式不要引起误解(六)预试当题目编好后,编制者即需进行预试。预测对象的性质应与将来正式量表要抽取的性质相同。预测时选取样本数应该多大最为合适?一般来说如果要对量表进行因素分析被试量应该是题目的5-10倍。(七)整理问卷与编号1问卷回收后,应一份一份检查筛选,一般来说筛选可参照以下几个标准:对收回的问卷进行答题完整性与真实性的检查。为了便于资料的统计分析,有以下情况出现时,则统一对该问卷及题项进行标记处理:A、漏答题项超过3题(不含3题),作为废卷标记,予以剔除。B、作答有明显反应倾向(如:采取极值作答,连续10题选择同一答案或者答案以某种规律出现)的问卷,作为废卷标记,予以剔除。C、对某一题项同时选择两个及以上选项的,该题项作为缺失值标记,缺失超过3条的,作为废卷,予以剔除。D、漏答的题项作为缺失值标记。2筛选完后的问卷应加以编号,以便将来核对数据只用;之后再给各变量、题项一个不同代码,并依问卷内容,有顺序的输入计算机。(八)项目分析项目分析(itemanalysis)的主要目的是针对预试的题目加以分析,以做为正式选题的参考。项目分析的方法At检验法。以t检验而言,在进行项目分析时,是以该分量表总得分的高分组(前25%-33%的被试者)和低分组(后25%-33%的被试者)在每一题得分的平均数进行差异比较。所得的值称为决断值(criticalratio,简称CR),必须高于查表的临界值,才具有鉴别力,有的学者建议CR值至少应达3以上为佳B相关法。在进行相关法时,有两种方式,一种是含本题在内所得的相关,另一种是不含本题在内的相关。进行第一种相关法时,首先将每个受试者分量表的总得分算出来,然后以题为单位,计算每一题与总得分的相关。一般而言,相关系数至少应达0.4以上为佳。进行第二种相关法时,以每一题和该题所在的分量表的总得分(不含该题)求相关。一般而言,相关系数应达显著水准才算是具有鉴别力的题目。在做项目分析时,这两种方法都是以单题为单位来进行分析(九)编制正式题目编制者可根据项目分析的结果来进行选题,只要鉴别力合乎标准的题目都可以选为正式的题目。若项目分析所得各题的决断值都合于要求,则由高而低选出预定要的题数。(十)问卷质量的判断一份好的问卷必须具有相当的信度和效度。信度即是指问卷所测结果的一致性或稳定性。常用信度评估方法。效度是指一个量表能够有效的测量到它所要测量的特质的程度,譬如一份有效的「成就动机量表」应该能确实反映出受试者的成就动机,高成就动机者在此量表的得分应该比低成就动机者的得分显著要高。常用效度评估方法1重测信度是指用同一问卷对同一组被试施测两次所得结果的一致性程度,其大小等于同一组被试在两次测验上所得分数的皮尔逊积差相关系数。使用前提:A所测量的心理特征必须是稳定的B遗忘和练习的效果基本上相互抵消C在两次施测的间隔时间内,被试在所要测量的心理特质方面没有获得更多的学习和训练。2分半信度是指将一个测验分成对等的两半后,所有被试在这两半上所得分数的一致性程度。分半的方法:按题号的奇偶分半、按题目的难度分半、或按题目的内容分半。3同质性信度又叫内部一致性系数,它是指测验内部所有题目间的一致性程度。题目间的一致性含有两层意思:a是指所有题目都测的是同一种心理特质,b是指所有题目得分之间都具有较高的正相关。常用计算方法:克隆巴赫α系数4评分者信度指多个评分者给同一批人的答卷进行评分的一致性程度。5复本信度指两个平行的测验测量同一批被试所得结果的一致性程度。1内容效度指一个测验实际测到的内容与所要测量的内容之间的吻合程度。内容效度的确定方法是逻辑分析法,其工作思路是请有关专家对测验题目与原定内容范围的吻合程度做出判断。常用方法专家评定法具体步骤:A明确欲测内容的范围,包括知识范围和能力要求两个方面。B确定每个题目所测的内容,并与测验编制者所列的双向系目标对照,逐题比较自己的分类与制卷者的分类,并做记录。C制定评定量表2结构效度指一个测验实际测到的索要测量的理论结构和特质的程度,或者说它是指测验分数能够说明心理学理论的某种结构或特质的程度。常用分方法:因素分析法3实证效度指一个测验对处于特定情境中的个体的行为进行估计的有效性。也就是说,一个测验是否有效,应该以实际的效果来作为检验标准。在这里,被估计的行为是检验测验效度的标准,简称为效标。常用的效标:工作绩效、实际工作表现、对团体的区分等。实证效度的确定方法:A相关法计算测验分数与效标测量的相关B区分法被试接受测验后,让他们工作一段时间,再根据工作成绩(效标)的好坏分成两组。这时再回过头来分析这两组被试原来接受测验的分数差异,若两种人的测验分数差异显著,说明该测验有较高的信度。C命中率根据测验选出来的人当中工作合格的人数,以及根据测验淘汰的人当作工作不合格的人数之和与总人数之比。开放式问卷又叫无结构型问卷。其特点是项目的设置和安排没有严格的结构形式,所调查的问题是开放式的,被调查者可以根据自己的意愿发表意见和观点。但无结构型问卷并非真的完全没有结构,只是结构较松懈或较少。这种类型的项目较少作为单独的问卷使用,往往是在对某些问题需要作进一步深入调查时与结构型问卷配合使用,或用在研究者对某些问题尚不清楚的探索性研究中。使用开放式问卷的优势包括:可以收集到范围比较广泛的资料;可以比较深入地发现和探究一些特殊问题,探询到特殊群体的意见和观点。使用开放式问卷的局限性包括:收集到的资料很难量化,难以进行统计分析;要求研究者有较强的资料分析问题能力;不适合文化程度不高、文字表达有困难的研究对象。第二节测验的实施一、测验的实施过程1.实测前的准备工作2.指导语3.测验情境4.测验焦虑5.与受测者建立良好的协调关系6.评分技术二、测验分数的解释1.如何看待测验分数的意义2.如何向受测者报告测验分数第八章测验的项目分析项目分析包括定性分析和定量分析。定性分析包括考虑内容效度、题目编写的恰当性和有效性等;定量分析主要是指题目难度和区分度的测量。对项目进行筛选和修订,可以提高测验的信度和效度。第一节测验的难度一、难度(difficulty)的意义难度,指项目的难易程度。在最高作为测验中,称为“难度”,而在典型作为测验中,则指“通俗性”。两者都是指在总体中,能够正确或确切回答某项目的人数。二、难度的计算(一)二分法记分项目的难度1.通过率P=R/N2.极端分组法(上下27%)P=(PH+PL)/2(二)非二分法记分项目的难度P=X/XmaxX为所有被试在该项目上的平均得分,Xmax为该项目的满分。三、测验难度水平的确定效标参照测验、掌握测验:不考虑难度;选拔测验:难度=录取率;对于选择题来说,难度一般应大于猜测概率;无论是速度测验,还是难度测验,一般都应防止被试得满分,因为满分的意义是不明确的。大体而言,难度为0.50时最理想,此时项目具有最大的鉴别力。但在实际操作中,让所有项目难度都到达0.50困难很大,而且也不必要,一般只需使项目的平均难度接近0.50,而各个项目的难度在0.50±0.20之间变化。四、难度的等距变换根据正态分布表,将难度P作为正态曲线下的面积,转换成相应的Z分数,这就是等距量表。PY0ZZYP.00.39894.00000.50.35207.191461.00.24197.341341.50.12952.433191.96.05844.475002.00.05399.477252.50.01753.493792.58.01431.495063.00.00443.498653.50.00087.499773.99.00014.49997美国教育服务中心以Δ作为难度指标:Δ=13+4ZP=.0013Z=+3Δ=25P=.16Z=+1Δ=17P=.50Z=0Δ=13P=.84Z=-1Δ=9P=.9987Z=-3Δ=1五、难度对测验的影响(一)测验难度影响测验分数的分布形态难度大,正偏态难度低,负偏态(二)测验难度影响测验分数的离散程度测验过难或过易,分数全距缩小,信度降低。P=0.50时最佳第二节测验的区分度一、区分度的意义区分度(discrimination)是指测验项目对被试心理品质水平差异的区分能力或鉴别能力。项目的区分度是测验是否有效的“指示器”。二、区分度的计算(一)项目鉴别指数法1.鉴别指数(indexofdiscrimination,D)的计算D=PH-PL取值范围:-1~+1鉴别指数题目评价0.40以上很好0.30~0.39良好,修改会更好0.20~0.29尚可,仍需修改0.19以下差,必须淘汰2.极端组的划分27%规则一般情况下,取上下25%~33%均可。样本少时,可以取50%注意:由于计算机的方便使用,可以上下50%作为划分高低组的标准,或者多分几组,对区分度和难度作详细分析。因为只取上下两端,只利用了一部分资料,浪费了很多信息,有可能得出错误结论。(二)相关法(项目-总分相关)1.点二列相关Xp-Xqrpb=√pqSt2.二列相关Xp-XqpqXp-Xtprb=•或rb=•StySty3.φ相关ad-bcrφ=√(a+b)(c+d)(a+c)(b+d)4.四分相关5.项目和总分相关重叠的校正当测验项目超过20个项目时,校正法通常毫无意义。rtpSt–Sprpq=√St2+Sp2–2rtpStSp(三)项目特征曲线(itemcharacteristiccurve,ICC)项目特征曲线描述了效标分数不同的被试在该项目上的通过率。曲线坡度越陡,鉴别力越好,预测的误
本文标题:问卷的编制.
链接地址:https://www.777doc.com/doc-4035625 .html