SOLO理论

SOLO理论和试题评分高凌飚2007年11月13日考试评价与命题技巧讲座六学习成就的SOLO分类法TheStructureofObservedLearningOutcomeSOLO是什么？•SOLO:TheStructureofObservedLearningOutcome（可观察的学习成果分类法）•SOLO分类法由比格斯（Biggs）教授首倡，是一种以等级描述为基本特征的质性评价方法。已在大洋洲和东南亚地区经过广泛的实验和应用。•SOLO分类法的基本理念源于皮亚杰的认知发展阶段论。•SOLO分类法适用于开放性试题的评分，也可以根据预定回答试题的层次，逆向给试题分类。SOLO的基本假设•与儿童的成长过程有相似，新知识的学习过程同样带有阶段性。•在不同的学习阶段，思维操作的模式有着质的差异。•人的学习首先是由少到多的量的积累，再发展到质的跃迁，从低级的阶段进入高级的阶段。这种思维方式的差异，从质的方面反映了学习所达到的水平，可以从学生回答问题的表现中反映出来。Biggs&Collis(1982):EvaluatingQualityofLearning:TheSOLOTaxonomy,AcademicPress,NewYork,1982支撑SOLO的例子背景，在给学生上完一堂有关雨的形成的课后，要学生回答问题。“为什么山脉向海的一面要比朝向内陆的一面潮湿一些？”不留心听课，不知道课堂上讲些什么，以前又没有这方面的知识1＋掩饰234567跟随着对素材的回忆过程的开展，注意越来越深入概念化抽象扩展试图将所涉及的各个方面加以概括试图将这些知识与原有知识尽可能地联系起来不知道。因为向海的一面雨下得多。因为海风首先吹到向海的一面。因为当我们去到紧靠海边的小屋时，要经过一条盘山路，小屋比山这边的路上要潮湿得多。父亲常会交代：‘不要跌跤’。我觉得我们应该搬走；搞部活动房车去打猎要比捕鱼有趣得多。此外，我讨厌下雨。因为从海面来的空气带有湿汽，像雾这一类。湿汽先到向海的一面，变成雨下到地上，到达山的另一侧时，湿汽都没了。盛行风从海上吹来，所以称为海风。海风带来海水的蒸汽，遇到高山被迫上升，由于山顶比海平面高，越高的地方温度就越低，水蒸汽的温度也降低。结果水蒸汽在上升过程中凝结成雨降下来。当风吹到山的另一边时，已经变得干燥了。只有当风从海上吹来时，这种说法才是对的。这时，海风带来海水蒸发而成的蒸汽，遇到山峰时，顺山坡向上并冷却。冷却使水蒸汽凝结，变得比空气重，成为雨滴落下来。气流不仅变得干燥了，由于上升还变得更密集，这一过程使气温升高，就象单车的打气筒使温度升高一样。因此有两方面的理由造成气流的不饱和。其作用就象钦纳克风（冬天吹到加拿大洛基山脉的暖风）一样。如果没有山的话，海岸边和内陆似乎不应有什么不同。一切取决于地貌、风向和气温等条件。这些条件如果有所不同的话，能量转换的过程也就不同，气候的模式也会很不相同。上述例子的认知层次•没有形成对问题的理解，回答问题逻辑混乱，或同义反复－前结构•回答问题时，只能联系单一事件，找到一个线索就立即跳到结论上去－单点结构•回答问题时，能联系多个孤立事件，但未形成相关问题的知识网络－多点结构•回答问题时，能够联想多个事件，并能将多个事件联系起来－关联结构•回答问题时，能够进行抽象概括，结论具有开放性，使得问题本身的意义得到拓展－拓展抽象结构发展阶段SOLO层次能力思维操作应答结构前运演4－6岁前结构最低：问题线索与解答均混乱不接受或同义反复，不了解相关知识初级具体运演7－9岁单点结构低：问题线索＋单个相关素材只能联系单一事件认知发展阶段和解答层次中级具体运演10－12岁多点结构中：问题线索＋多个孤立的相关素材能联系有限的孤立的事件具体概括运演13－15岁关联结构高：问题线索＋相关素材＋联系归纳在旧情景或已知经验范围内进行概括形式运演16岁以上拓展抽象最高：问题线索＋相关素材＋联系＋假设演绎与归纳能在新的情景中进行概括说明：图中Ｘ表示不相关素材；●表示给出的相关素材；○表示没有给出的相关假设。如图方法：用火柴摆成框形图案，四根摆一个框，七根摆两个，等等。SOLO理论认为各结构层次的学生能够回答的问题如下：（1）单一结构：多少根火柴能摆三个框？（2）多元结构：摆五个框比摆三个框多用多少根火柴？（3）关联结构：用31根火柴能摆多少个框？（4）扩展抽象结构：如果摆成了n个框，则用去了多少根火柴？例1火柴棒摆图形•答对第一个问题就达到单点结构的水平，可以记为D；•答对第二个问题就达到多点结构的水平，可以记为C；•答对第三个问题就达到关联结构的水平，可以记为B；•答对第四个问题就达到拓展抽象的水平，可以记为A。•这种记分方法有利于教学诊断，可以为教师和学生提供有益的反馈信息，主要用于过程性评价。在终结性的考试与评价中，若有需要，还可以给各个等级赋予一定的分值。此外，在需要一定区分度的考试中，上述四个等级之间还可以有过渡的等级，也就是说，SOLO的等级数不必限于5个，可以有多个等级，分别记为A+、A、B+、B、C+、C……甚至可以使用百分数。实践中如何运用SOLO？•简化•细化•例–将一气垫导轨倾斜放置，用标尺标明导轨上各点的位置，让滑块从导轨的高端滑下。不断重复这一过程。观察这一过程并做出你认为必要的测量（可以利用自己的手表和导轨上的标尺），做出你认为必要的记录，然后以你认为是最科学的方式描述这一过程。应清楚地写出必要的文字说明、推导论证、公式计算、数据结论、图线表格等等。评分标准本题无参考解答，教师可参照下面基于SOLO分类理论制定的评分标准给学生评分：–0分：没有回答，或给出的回答言不及义或文不对题。–1分：只有定性的描述，基本上能说清滑块的运动过程。–2分：有定性的描述和定量的测量。其中定量的测量只是测出几个时间及距离而没有做进一步的分析整理，也没有结论。或测得的数据与实际的差距很大。–3分：有定性的描述和定量的测量。其中定量的测量包括对滑块运动到不同位置时，滑块与原点的距离及运动所经过的时间，并能用这一数据计算出滑块运动的平均速度或即时速度这两个量中的一个。测得的数据基本上合理。–4分：情况同上，但能将滑块运动的平均速度和即时速度两个量都求出来。–5分：在前面的基础上，整个实验报告的叙述，包括目的、原理、过程、数据记录和整理、最后的结论等，条理清楚，结论明确。–7分：在前面的基础上，进一步求出滑块运动的加速度。–9分：在前面的基础上，能利用所掌握的多种数学工具，包括图表、图线等等，将实验观察的结果非常清楚地表达出来。–10分：在前面的基础上，能从实验事实出发对滑块的运动以至普遍情况下的匀加速运动，或其它任何问题进行讨论，且言之成理。•其它形式的答案，可参照上述等级给分。利用PTA量表给开放试题评分•PTA：PrimaryTraitAnalysis（基本要素分析）•PTA量表是美国教师沃尔弗德与安迪生以及她们的同事所倡导和开发的一种对于学生作业、尤其是开放性作业的评分工具。•PTA量表是一种标准参照的评价工具，可以用来评价多种学生表现，如：英语口语、语文作文、实验操作、研究报告、艺术表演等等。•PTA是一项具体任务，即，对于每一个作业和测验有不同的标准。•PTA既可以用于外部统一考试，也可以为课堂作业建立评价标准。PTA量表的理论假设•任何一种行为表现，包括行为的和认知的，都会有一系列基本的要素，这些要素构成学生学习某些知识、技能或行为表现的基本单元，只要找出这些基本单元，并将学生在这些基本单元上的行为表现作出准确的评定，则学生在完成这些具体任务时的总体特征就可以得到适当的评定。制定PTA量表三个步骤I.确定可能对评价起重要作用的要素。II.编制测试学生每一个要素的评价量表。III.对量表进行试测与修改。•PTA量表的编制过程主要就是确定基本要素及其等级划分的过程，编制严格意义上的PTA量表，既依靠编制者以往的经验，也依靠同行间乃至师生间的交流与合作，它是一个不断循环、不断修正、不断完善的过程。在对于区分度要求不是很高的考试与评价情境中，PTA量表中各个要素的等级描述可以省略而代之以简单的等级数量。•用PTA量表作等级评定的程序是：首先分别对各个要素赋予等级分数，而后按照一定的权重，将各个要素的得分相加，最后得到学生在整个任务中的表现分数。PTA量表的制作实例•美国教师安迪生要求学生在生物课高级班中设计并完成一个原创性的科学实验：比较两种可以买到的产品，并用科学报告的格式来说明这种比较。她用PTA量表评价学生在完成这一任务上的表现。首先，她选择了十个她所要测验的要素，这些要素包括：1.标题2.引言3.科学的格式要求4.方法和资料方面5.非实验信息6.实验设计7.操作性定义8.变量控制9.数据搜集和结果交流10.数据的解释：结论和启示任务：设计和完成一个原创性的科学实验，并按照科学格式撰写报告。方法和资料部分的评分标准–水平五：包含有效的、数量充足的和简明的组织信息，并且实验能被重复；记录下所有文件固有的信息，并能返回到这一部分；确认所收集到数据的来源，以一种适当的时间识别后续信息；没有繁杂的描述过程。–水平四：同五，但可能包含不需要的信息或繁杂的描述在内。–水平三：当前的实验含有明确的位置，文件中所有信息都可能同这部分有关系；但不能识别某些数据的来源中目前的后续信息处于无组织的方式。–水平二：目前实验是最低的重复，部分基本设计能被读者推理出，没有足够的过程描述，在前面的材料和方法中不能预期出结果的信息。–水平一：实验描述极其缺乏，或实验不能被重复。PTA量表的等级•一般说来，PTA量表可以分为2－5个等级，用以描述每一个水平。如前面提到的安迪生在她的要素之一：“方法与资料”的量表中，设计了五个水平，最高等级的分数为5。其实也可以分为二个、三个或者四个水平，这要依据评价的目的而定。如：两个水平的量表实质上要做出一个通过或者失败、是与不是的判断，在只需要作出判断的情况下，这种水平的划分是比较合适的。等级的表述和使用方法一、描述法•例要素：解决文中描述问题的方法–水平五：学生综合解决这一问题–水平四：学生分析问题–水平三：学生解释问题–水平二：学生描述问题–水平一：学生仅仅确认了问题或者根本就没有提这一问题•增减法•例：一个实验报告的实例：水平五：•报告安排得有逻辑、有条理；•重述实验假设；•说明数据是怎样支持假设和拒绝假设的；•在数据解释的过程中从课堂内容、测验等方面搜索资料；•识别解释非预期结果和由于实验失误所造成的结果；•运用科学术语（反映对实验中涉及的科学原理的理解）；•说明接受还是拒绝假设。–水平四：报告达到水平五的前三个和其余四个标准中的任意两个标准。–水平三：报告达到水平五的前三个和其余四个标准中的任意一个标准。–水平二：达到七个标准中的任意三个标准。–水平一：达到两个或者更少的标准。在实践中如何使用PTA量表？•①简化使用–所谓简化使用，就是编制一个比普通PTA量表更为简单一些的等级评价量表。主要做法是：将普通PTA量表中的多个基本要素作以合并，并在一个量表中呈现；或者省略各个要素的等级量表中，各个水平的详细文字描述。其特点是：可以减轻教师的工作量，提高评定效率，但精确性降低、评分误差可能会加大。•②完整使用–所谓完整使用，就是完全按照PTA量表的一般编制程序，首先确定基本要素的数量，再按照要素的数量编制多个PTA评定量表，而后分别以各个分量表对学生作业中的各个基本要素进行评定，最后得到一个学生的总成绩。特点是：可以对各个要素分别进行评价，从而可以较好地发挥评价的教学诊断功能，。但工作量较大，分数的合成也是一件费时的事情。•③部分使用–所谓部分使用，就是将PTA的分数仅仅作为确定学生最后成绩的一个部分，而不是全部。比如，安迪生在确定学生等级时，80%是依据PTA分数，20%要看学生是否运用了恰当的图表与数字，是否遵守了字数限制，是否按时交了作业，以及是否认真地作过修改等等。SOLO与PTA的适用范围题型方法操作型表现型论文型探究型等级描述型量表——+++要素分析型量表++++—•等级描述评定量