大数据支持下的课堂评价（PPT60页)

大数据支持下的课堂教学评价杨歆成都师范学院1、教师为什么需要了解评价评价与测验为什么需要了解评价•诊断学生的优势和不足•监测学生的发展•评定等级•判断教师的教学效果•影响公众对教育的看法•有助于评价教师•明确教师的教学目标如何评价•编制课堂教学评价工具•解释测试结果•对教学具有启发意义的评价评价三要素•信度•效度•偏见的克服2、评价的信度•信度=一致性信度三要素稳定性信度复本信度内在一致性信度三种信度间的关系•稳定信度≠复本信度≠内在一致性信度测量的标准误•𝑆e=𝑆𝑥1−𝑟𝑥𝑥•𝑆e：测量的标准误•𝑆𝑥：测验分数的标准差•r𝑥𝑥：测验的信度3、评价效度•依据评价结果所作推论的可靠程序效度三要素内容相关效度效标关联效度结构相关效度信度与效度的关系4、偏差的克服•评价偏差是反映评价工具质量的重要标准，指的是某些学生由于性别、民族、种族、社会地位、宗教信仰或其它群体特性，致使在评价结果受到影响。评价偏差的形式冒犯不公平的惩罚差异影响与评价偏差偏差判断的方法偏差审查小组单个项目的偏差判断总体偏差判断课堂中的偏差检测5、决定评价什么和如何评价评价什么决策驱动型评价教学目标的作用认知，情感和运动能力的评价基于标准的课堂评价选择评价内容的建议•1、明确与评价程序相关联的评价决策•2、利用课程目标搭建一个框架•3、了解评价所针对的领域•4、收集相关文件•5、听取专家、同事关于评估内容的建议•6、通过相近似的考核制度如何开展评价•运用常模参照测验还是采用标准参照测验•选择性反应和建构性反应•多种题目类型•反应测验题——判断题、多重判断题、多项选择题、匹配题•建构性反应测验题——简答题、主观题•表现性评价——观查方法、表现性测验•档案袋评价•情感测评6、反应测验题•反应测验题包含了判断题、多重判断题、多项选择题、匹配题编制的戒律•晦涩的指导语•模棱两可的陈述•无意的线索•复杂的句型•深奥的词汇判断题•措辞严密，引发学生的慎重思考•尽量不用否定句•避免考查两个概念•平衡答案的种类•保持测验题的长度相近多重判断题•区分测验题目组•题目与题干相符合选择题•题干内容描述清晰•避免使用否定句作题干•关注选项的长度•合理布局正确答案的位置•妥善处理“以上说法都……”的选项匹配题（连线题）•使用同质性条目•力求相对简洁•确保反应多于前提•排列反应•为学生描述任务•合理安排测验题目，避免跨页7、建构性反应测验•建构性反应测验包括简答题和主观题简答题（填空题）•尽量采用问句式，减少使用不完整陈述式简答题•保证答案的简洁性•合理设置空格•限制空格的数量•空格的长度要相等主观题•向学生指明答案的展开程序•明确描述学生的任务•提供答题的参考时间并给出题目的分值•避免出现选做题•预测学生的回答主观题评分•分项的或者整体的评份方式•设计一个试行的评分要点•事先确定写作基本技能的重要性•一次完成对一个题目的评分•尽量保证匿名评分8、表现性评价让学生完成有关小组合作解决问题的判断让学生完成一系列的选择，用于解决问题的某一步学生简短地回答一系列关于小组合作解决问题的方式呈现给学生一个新的问题，让学生写一篇短文说明解决以前没有遇到过的某个问题学生学会通过小组合作解决问题测量学生合作技能的方法表现性评价任务的选择•推论和任务•类推性的困境•评估表现性测验任务时需要考虑的因素•类推性•真实性•多重性•可传授性•公正性•可行性•可测性确定评分标准评价规则•任务明确规则•超一般规则表现评分的误差来源•评分工具的缺陷•程序方面的缺陷•教师个人偏见9、档案袋评价•对个人作品的系统收集档案袋评价与标准化测验的区别档案袋评价较全面反映学生参与的多种活动让学生参与评价自己的进步成就，从而确定出一下步的学习目标在尊重学生个体差异的基础上评价每一个学生的成就标准化测验依据有限的任务来评价学生的能力由教师根据学生答题情况评分用相同的标准评价所有学生档案袋评价是一种合作性评价方式学生的自我评价是一个重要的目标关注学生的进步、努力与成就将评价与教、学结合起来标准化测验评价过程是非合作性的缺少学生的自我评价只关注学生的成就教、学与评价是分离的课堂档案袋评价与大规模评价中的档案袋评分•在课堂中运用•谁在评价谁•在大规模评价项目中的应用课堂档案袋评价的关键成分•1、确保学生“自己拥有”档案袋•2、决定收集何种用品样本•3、收集和存放作品样本•4、选择评价标准•5、要求学生评价自己的作品•6、安排和举行档案袋会谈•7、调动家长参与档案袋评价过程样本的选取•家庭作业中一个开放式问题的解决方案•学生绘制的图形，制作的网页、微博等•用软件解决问题的方案10、情感评价•学生的学习态度、学生的价值观、学生的自尊等为什么要评价情感•情感的重要性•让教学关注学生情感•监控学生的状态评价哪些情感变量•态度目标•兴趣目标•价值观目标情感变量怎样评价情感利克特量表多焦情感量表利克特量表•由一系列陈述组成，每个陈述都需要你表明你的态度。编制利克特量表•1、选择你想要评价的情感变量•2、对每一情感变量都编制一系统相关的积极陈述和消极陈述•3、找几个人来确定每一项陈述究竟是积极的还是消极的•4、确定每一个陈述的备选答案的数量和使用的措辞•5、准备好自陈量表，并指导学生如何回答•6、让学生回答量表•7、对量表进行评分例：是否喜欢学校•在我每一天的生活中，学校是我生命中最快乐的部分•（非常同意、同意、不确定、不同意、非常不同意）•尽管偶尔我会觉得学校令人感到不愉快，不过绝大多数时候我还是喜欢他的•（非常同意、同意、不确定、不同意、非常不同意）多焦点情感量表•收集学生情感倾向信息的评价工具编制多点情感量表•1、选择要测量的情感变量•2、确定每个情感变量安排多少个测量项目•3、每每个变量编一一系列积极和消极的陈述•4、确定答案用措辞•5、为量表设计指导语例：•指导语：请表明量表中的每一条陈述而言是否真实。这当中有些陈述是积极的，而有些是消极的，请决定是否每一条陈述对你而言都是真实的。答案没有对与错之分，所以请你诚实回答。请不要在量表上写你的名字。陈述是不是不确定1、总体而言，我是喜欢学校的□□□2、和喜欢学习科学□□□3、我能写出好的报告和故事□□□4、我不喜欢阅读□□□5、我不喜欢在课堂上回答问题□□□……11、促进教师发展的评价•基于评判的完善方法•基于经验的完善方法基于评判的完善方法•评判自己的评价工具•同事的评判•学生评判•五条检查标准：•1、遵循编写指南或要求•2、对分数推论有所贡献•3、内容要准确•4、内容没有遗漏•5、公正基于经验的完善方法•难度指数•区分度指数•难度指数：•p=R/T•R：回答正确的学生数量•T：回答学生总数量•区分度指数：•𝐷=𝑝ℎ−𝑝𝑙•𝑝ℎ：高分组难度指数•𝑝𝑙：低分组难度指数题目区分度指数题目评价=0.40很好0.30-0.39较好0.20-0.29不重要的题0.19低劣12、教学导向评价•评价的目的是为了作出更好的教育决策，给予学生更好的教育评价结果促进了什么样的教学决策？决策种类评价策略决策选项教什么在教学前进行前测是否对特定教学目标提供指导教多久对学生的学习进度进行阶段性过程评价对于某个学生或是整个班级，是否继续或停止对某个目标的指导教学效果比较学生教学前后的表现下次使用时，是否保持、抛弃或者修正原有的教学安排大数据完