新家庭计划项目的督导与评估.

新家庭计划项目的督导与评估南京邮电大学理学院温勇2016.4.19南京新家庭计划项目培训班前期调研中的发现：对督导与评估的作用认识不足有些项目点几乎没有开展过真正的督导与评估活动；有些项目点督导与评估活动走过场；对督导与评估的方法了解不够程序和步骤不规范；方法不科学；记录不完整为什么要强调项目的督导与评估？项目管理：制定计划组织实施结果反馈督导评估第一节项目督导评估的一般概念第二节项目督导评估的步骤和方法第三节新家庭计划项目中的督导第四节新家庭计划项目的评估第三章项目的督导与评估第一节项目督导评估的一般概念1.什么是项目督导？2.什么是项目评估？3.督导与评估的区别：4.督导与评估的作用：5.督导与评估的内容：第一节项目督导评估的一般概念1.什么是项目督导？定期、持续地对项目实施的全过程进行检查、督促和指导；检查项目是否按计划进行，项目的人、财、物投入是否到位；了解项目进展，发现项目实施过程中存在的困难和问题；没有“指导”的督导是不全面、不成功的！领导或专家应该做项目的“明白人”！第一节项目督导评估的一般概念2.什么是项目评估？评估是指在项目实施一段时期后，对照项目目标对项目实施的效果进行总结与评价；包括：总结项目的成功经验和失败教训、对项目实施效果和目标完成情况做出客观公正的评价。第一节项目督导评估的一般概念3.督导与评估的区别：（1）目的不同：督导注重过程，了解项目进展是否顺利，存在哪些困难和问题，是否需要调整，督促和指导项目地区加强管理，保证项目按计划进行；评估注重结果，分析项目实施的效果，总结成功经验和失败教训，评价项目后续活动能否正常进行。（2）时间不同：督导是定期、持续的活动，可以按月督导，也可以按季督导；而评估则是在项目实施一段时期后，可以每半年进行一次，也可以每年进行一次。第一节项目督导评估的一般概念4.督导与评估的作用：（1）通过对项目活动的检查，了解活动开展是否顺利，是否按计划进行，存在哪些困难和问题；（2）通过对项目活动的监督，督促各级项目管理和实施机构，按分工/职责和年度计划开展项目活动；（3）对项目活动开展过程中存在的问题及其原因进行分析，指导各项目地区的后续活动；第一节项目督导评估的一般概念4.督导与评估的作用：（4）了解项目进展，考虑是否需要对项目目标和具体安排等进行调整；（5）评估项目活动的效果，总结经验和教训，对下一阶段的项目活动或项目试点结束后项目的可持续发展提出意见和建议。第一节项目督导评估的一般概念5.督导与评估的内容：（1）项目的制度建设和部门协作；（2）项目的管理；（3）项目中的综合服务；（4）项目中的能力建设；（5）项目的可行性：现在能不能做？（6）项目的可持续性：将来能不能做？第一节项目督导评估的一般概念5.督导与评估的内容：（1）项目的制度建设和部门协作：各地政府和相关部门对项目的重视程度，如是否下发有关政策性文件；部门协调合作机制；各部门责任明确并落实到位第一节项目督导评估的一般概念5.督导与评估的内容：（2）项目的管理：项目实施机构的建立；项目计划的制定；项目活动的组织实施；项目信息的采取与结果反馈；项目中的保障措施第一节项目督导评估的一般概念5.督导与评估的内容：（3）项目中的综合服务：家庭保健、科学育儿、养老照护、家庭文化等子项目的实施情况和效果；健康教育与咨询服务等第一节项目督导评估的一般概念5.督导与评估的内容：（4）项目中的能力建设：基层服务机构建设情况；服务及管理人员接受培训及能力素质提高情况第一节项目督导评估的一般概念5.督导与评估的内容：（5）项目的可行性：评估项目活动哪些是可行的，哪些需要改进；评估项目活动的效果是否达到预期目标；总结项目活动的成功经验和失败教训并形成案例；对项目实施机构及服务人员能力进行评估，如开展健康教育与咨询的能力，养老照护服务的能力，机构和人员配备能否满足项目活动开展的需要等第一节项目督导评估的一般概念5.督导与评估的内容：（6）项目的可持续性：对家庭保健、科学育儿、养老照护、家庭文化等进行总结，从组织管理、群众参与、技术支撑、政策支持、经费保障等层面评估其可持续性；分析项目活动可持续的关键要素，总结归纳服务模式，对今后开展项目活动提出对策建议。第一节项目督导评估的一般概念1、督导与评估的步骤2、督导与评估的方式3、督导与评估的方法第二节项目督导评估的步骤和方法1、督导与评估的步骤：（1）制定督导评估方案（2）选择督导与评估的方式和方法（3）确定督导与评估人员（4）开展实地督导与评估活动（5）撰写督导评估报告（6）反馈督导与评估结果第二节项目督导评估的步骤和方法1、督导与评估的步骤：（1）制定督导评估方案：①督导与评估的目的：②督导与评估的对象：③督导与评估的内容：④督导与评估的方式方法：⑤督导与评估的组织：⑥督导与评估的时间安排：⑦督导与评估结果的分析和应用：第二节项目督导评估的步骤和方法1、督导与评估的步骤：（2）选择督导与评估的方式和方法：依据督导评估方案选择督导与评估的方式和方法。方式包括：自我评估，上级督导评估，第三方评估；方法包括：定量评估方法、定性评估方法；落实好各种督导与评估方式方法对督导评估对象和督导评估现场的要求。第二节项目督导评估的步骤和方法1、督导与评估的步骤：（3）确定督导与评估人员：第二节项目督导评估的步骤和方法1、督导与评估的步骤：（4）开展实地督导与评估活动：依据督导评估方案要求和时间安排开展实地督导与评估活动；注意督导评估活动的公平、公正、规范；注意督导评估资料的记录、收集和保管；注意及时发现督导评估中存在的问题并考虑是否需要调整或修改督导评估方案。第二节项目督导评估的步骤和方法1、督导与评估的步骤：（5）撰写督导评估报告：对督导评估资料（访谈记录、调查问卷、统计数据、现场观察记录或照片等）进行汇总整理；撰写督导与评估报告。包括：背景、督导评估对象、督导评估过程、督导评估方法、督导评估中的主要发现、成绩和存在的问题、对今后工作的建议等。第二节项目督导评估的步骤和方法1、督导与评估的步骤：（6）反馈督导与评估结果：将督导评估的结果向有关地区或部门反馈；在反馈时要说明项目取得的成绩和存在的问题和不足；对今后改进项目服务与管理提出意见和建议第二节项目督导评估的步骤和方法1、分级督导：2、督导人员组成：3、督导的主要内容：4、督导的方法：5、督导的工具：第三节新家庭计划项目中的督导1、分级督导：省市级的督导每半年一次；县/市/区级的督导每季度一次；而乡镇/街道对村/居/社区的督导每两个月一次。第三节新家庭计划项目中的督导2、督导人员组成：上级领导项目专家居民代表第三节新家庭计划项目中的督导3、督导的主要内容：省市对县级、县级对乡镇/街道督导的主要内容：项目领导小组和项目办公室的设立、项目中的投入保障措施、对下级项目活动计划制定的指导、对下级项目活动和服务开展情况的督导等。乡镇/街道对村/居/社区督导的主要内容：健康教育与咨询服务开展情况，养老照护服务情况，家庭文化建设情况等。各级督导的重要内容是看项目是否按计划进行。第三节新家庭计划项目中的督导4、督导的方法：（1）查阅统计资料：（2）文献研究：（3）座谈或访谈：（4）问卷调查：（5）现场观察：第三节新家庭计划项目中的督导4、督导的方法：（1）查阅统计资料：查阅人口统计年鉴、卫生计生部门业务统计数据、民政部门家庭统计数据等，了解当地居民家庭及相关服务对象（老年人、孕产妇、青少年）的规模、结构（家庭类型，个人性别、年龄、文化、职业等）、分布（城乡、区域、社区等）等信息。第三节新家庭计划项目中的督导4、督导的方法：（2）文献研究：查阅各级政府、卫生计生部门、相关政府部门出台的关于家庭发展、老年健康促进、科学育儿、养老照护、医养结合、青春期保健、家庭文化建设等相关工作的文件、制度，也包括部门协作开展家庭发展服务的相关文件。第三节新家庭计划项目中的督导4、督导的方法：（3）座谈或访谈：选择家庭健康责任人、老年人或其照料者、孕产妇、学校或社区里的青少年等进行座谈或面对面访谈：了解他们对相关服务的评价；了解他们的需求满足程度以及需求变化；听取他们对改进项目活动的建议对项目地区政府和职能部门领导、辖区内服务机构负责人、健康教育与咨询服务人员等进行座谈或访谈：了解项目相关活动开展情况。第三节新家庭计划项目中的督导4、督导的方法：（4）问卷调查：设计新家庭计划项目居民家庭调查问卷：了解家庭及其成员对活动和服务的需求；对社区及服务机构提供的相关服务的评价；对提高服务水平的意见和建议等。问卷调查的结果既是对过往活动和服务评价的依据，也是制定新的活动和服务计划的依据。第三节新家庭计划项目中的督导4、督导的方法：（5）现场观察：重点查看基层服务设施配备情况，如健康教育阵地、居民活动场所、老年照护服务机构、医养结合的示范点、家庭及社区文化氛围的营造等。可以通过现场观摩针对不同对象开展的讲座、设置的宣传栏，了解宣传教育开展情况及服务人员的能力和水平。第三节新家庭计划项目中的督导5、督导的工具：3张表格！G:\新家庭计划项目督导表格和督导报告.doc6、督导报告的撰写：第三节新家庭计划项目中的督导1、评估的方法：2、评估的方式：3、评估人员组成：4、评估的主要内容：5、评估的步骤：6、评估指标体系：第四节新家庭计划项目的评估1、评估的方法：定量评估方法（或资料来源）主要有：反映项目活动的次数、参与人数和效果的项目统计报表，反映健康教育和健康咨询服务效果的有关记录，针对家庭和家庭成员开展的问卷调查资料等；定性评估方法（或资料来源）包括：查阅并分析和新家庭计划项目相关的文献，对活动或服务现场进行观察，召开家庭健康责任人及主要家庭成员以及服务人员座谈会或进行个别访谈等。第四节新家庭计划项目的评估2、评估的方式：自我评估、上级评估和第三方评估。各项目地区可以在上级年度评估前自己组织一次自我评估，也可以每半年自我评估一次；上级评估每年组织一次，评估的重点在于总结经验、发现项目亮点和存在问题，指导项目点的后续工作；第三方评估一般在项目试点结束前进行，对项目的实施效果做出客观、公正的评价，并判断项目是否可以推广，给出项目可持续发展的政策建议。第四节新家庭计划项目的评估3、评估人员组成：项目管理者上级领导项目专家家庭代表第四节新家庭计划项目的评估4、评估的主要内容：自我评估时，主要评估家庭保健、科学育儿、养老照护、家庭文化等项目的实施情况和效果，发现存在的问题；上级评估时，主要评估项目活动和服务的效果，项目中的保障性措施，项目可持续推广的关键要素等；第三方评估，除了评价项目实施效果外，还要归纳项目的成功经验和教训，对项目的可持续发展提出政策和对策建议。无论哪种评估方式，都要注意将项目实施效果和项目目标进行对比。第四节新家庭计划项目的评估5、评估的步骤：（1）制定评估方案或计划；（2）组建评估队伍；（3）开展现场评估；（4）撰写评估报告；（5）反馈评估结果。第四节新家庭计划项目的评估6、评估指标体系：（1）保障性指标（2）过程指标（3）结果指标第四节新家庭计划项目的评估6、评估指标体系：（1）保障性指标：①政府出台的开展新家庭计划项目的相关政策文件：查阅文件，评估政府在制度、政策和投入等方面的实质性支持，如家庭发展职能的确立、部门协调机制建立。②各级政府按要求承诺的项目配套经费到位率：配套经费到位率=第四节新家庭计划项目的评估%100数额府承诺的项目配套经费省（市、县、乡镇）政费数额实际到账的项目配套经6、评估指标体系：（2）过程指标：①有规范的活动或服务计划、记录、总结等；②活动或服务资料的整理分析利用（查看分析报告）；③举办4类活动或服务的次数和参加人数；④发放健康教育资料的种类和数量；⑤健康教育宣传栏设置和内容更新情况。第四节新家庭计划项目的评估6、评估指标体系：（3）结果指标：综合评价指标：居民家庭对项目活动和服