舆情监控系统

基于XX省交通行业网络舆情监测平台郭晓峰2018年2月23日项目概述1总体架构及关键技术32汇报提纲项目建设内容项目效益分析项目报价451、项目概述-背景2011年“7.23”甬温线特别重大铁路交通事故铁道部新闻发言人王勇平在新闻发布会上关于掩埋解释理由评论“不管你信不信，反正我信了”。李光斗在微博中写到“一个新名词的诞生：轻度追尾”，被转发10万多次，“轻度”一词瞬间在网络走红，这个新议题是新闻媒体在进行事件报道时没有斟酌好报道字眼导致的。四川青城山都江堰官方辟谣景区被传索桥断裂游客受伤是谣言两段题为“都江堰索桥断裂造成人员死亡”视频在网上流传，引发大量群众的恐慌情绪和大范围的二次传播，警方调查核实后，于当晚发布微博辟谣并公布原版视频（2014.2.24越南莱州省，2015.3.9巴基斯坦），及时安抚群众的紧张心情。1、社会舆情覆盖面和来源渠道更宽更广，不断深入和渗透到社会各个领域和各个层面2、社会舆情多样化、个性化和差异性、震撼性的特点更加明显，更容易引起社会的波动，甚至产生风采3、社会舆情传播的速度更快，传播的方式更加多式多样，舆情变化更加快捷、复杂；1、项目概述-新时代网络舆情特点交互性与及时性自由行与可控性情绪化与非理性个性化与群体极化性隐匿性与外显性丰富性与多元性网络舆情社会舆情随着互联网发展的影响力日益增大，网络舆情已成为各方关注的焦点。1、项目概述-项目的必要性以大数据观念变革传统网络舆情管理思维，准确把握网络舆情的内在特征及其在演化过程中的潜在规律，对于新形势下做好网络舆情管理工作具有重要的理论意义和实践价值。有效引导建立机制加强分析研判掌握主动权增加信息透明度，准确、及时地发布权威信息，使谣言破灭，从而有效引导舆论。建立权威专业的组织体系、加强互联网人才队伍建设、采取适当的舆情引导与控制手段，是建立科学有效的舆情应对机制的必需。善与媒体沟通，借助媒体传达贵州交通行业的声音，掌握舆论引导主动权。加强网络舆情分析与研判工作，区分不同性质的涉及本行业负面舆情，可以正确的为相关部门提供决策参考。1、项目概述-建设目标关注热点，抓住难点，快速实现网络舆情搜集处理工作，为领导决策参考服务。有利于全面掌握民意，提高执政水平及时了解和掌握社情民意，提高宣传思想工作的预见性、针对性、实效性。加快网络舆论的监管效率有利于组织力量展开信息整理、分析、引导和应对工作，提高贵州交通相关部门对网络突发舆情的公共事件应对能力。舆情监测方式转变针对互联网海量舆情自动实时的监测、自动敏感内容分析和自动实时报警的功能。有效地解决了传统的以人工方式对舆情监测的实施难题。建设目标项目概述1总体架构及关键技术32汇报提纲项目建设内容项目效益分析项目报价45采用J2EE技术体系，前端采用Ajax开发技术，操作简单、易用、高效、稳定。平台所有功能均采用纯B/S结构设计，零客户端维护。2、总体架构及关键技术-总体概述实时采集网络舆情信息，如门户网站、知名论坛、搜索引擎、博客、贴吧，微博等，7*24小时为用户提供信息采集、信息处理、信息编辑功能，实时掌握所关注的网络舆情信息，为贵州交通行业相关部门提供决策参考依据。2、总体架构及关键技术-关键技术0104030201网络爬虫技术是一种按照一定的规则，自动地抓取互联网信息的程序或者脚本。02云计算技术云计算平台提供了分布式文件存储和并行的计算能力，解决海量数据挖掘任务。04舆情智能分析技术自动分类技术自动聚类技术相似性排重技术03自然语言智能处理技术自动分词技术自动关键词和自动摘要技术全文检索技术分布式文件系统Google文件系统(GFS)分布式文件系统(HDFS)文件系统(KFS)分布式并行计算框架MapReducePregel（Google）Dryad（微软）集中查看网络文章、帖子、回复及关键指标领导负面信息对事件、人物、部门的意见热点话题与重要话题决策与行动知道知道报告周报月报2、总体架构及关键技术-业务流程业务流程网络舆情监测平台是针对互联网这一新兴媒体，通过对海量网络舆情信息进行实时的自动采集、分析、汇总、监视、并识别其中的关键信息，及时通知到相关人员，从而第一时间应急响应，为正确舆论导向及收集民众意见提供直接支持的一套信息化平台。2、总体架构及关键技术-网络舆情处理流程监测目标网站、新闻、微博、论坛、贴吧、博客网页数据采集监控对象设定网络爬虫技术采集范围采集频率采集速度采集策略反馈全文检索中文分词自动去重自动摘要自动分类正负舆情判定舆情来源分析舆情趋势分析舆情来源追踪舆情报表舆情报告短信、邮箱通过监测员数据处理舆情分析舆情报告数据库网络舆情监测构成舆情分析与报告网络数据采集数据处理舆情信息采集对象新闻门户网站微博论坛博客贴吧2、总体架构及关键技术-网络拓扑关系应用服务器数据库服务器采集服务器组客户浏览器客户浏览器客户浏览器防火墙目标网络因特网对舆情数据清洗、过虑、分析项目概述1总体架构及关键技术32汇报提纲项目建设内容项目效益分析项目报价453、项目建设内容-主要功能设计数据采集根据用户设置的信息源对数据进行采集数据处理信息预处理、二次分析处理、数据统计用户可以手动操作舆情。如：设置属性、加入简报、收藏、上报等根据系统配置和用户设置在网页上显示舆情信息舆情操作舆情浏览系统配置、用户管理、用户自定义设置信息管理经过分析出现重大负面信息时，系统将启动预警机制，迅速报警提示自动预警3、项目建设内容-舆情浏览舆情浏览：最新舆情实时展现最新获取到的舆情信息分类浏览将舆情分类为正面舆情、负面舆情、突发事件等舆情来源根据用户选择的来源网站显示舆情信息本地浏览分为本省和省外显示舆情信息信息要素显示舆情标题、摘要、高频词数、点击数、回帖数、来源网站等近期热点按舆情热度、点击数、回复数、转载数、时间顺序显示舆情统计每一个舆情浏览都有显示舆情分析图3、项目建设内容-专题舆情专题舆情：专题浏览专题舆情导出领导相关舆情热度分析通过用户自定义的舆情专题列表，用户可以轻松的区分和分类查阅专题舆情。3、项目建设内容-趋势分析趋势分析模块可以多维度、多类别、多时间、多平台等分析舆情信息，并生成相应分析图表与数据列表3、项目建设内容-舆情过滤数据过滤准垃圾过滤基于双重过滤可以过滤网页中的广告、图片、链接等无价值信息智能去重根据“文章相似性技术”确定是否重复、去重的级别；采用中文分词技术对文章关键字比较计算，得出文章相似度内容萃取包括时间过滤、来源过滤、排重过滤、热度过滤、显示过滤、舆情排序。3、项目建设内容-舆情操作设置文章属性、添加到舆情简报、添加到指定专题、添加到指定类别、添加到收藏夹、添加到导控任务、添加到指定账户、上报舆情。3、项目建设内容-舆情报表3、项目建设内容-舆情报警专门针对各大新闻网站进行高效率监控，以非常迅速的方法扫描这些网站的首页按照指定的采集任务在采集目标中采集舆情信息，自动比照，涉及到敏感词，进行“敏感报警“通过用户设置的“地域、人名和机构”关键词分析，对上述这些舆情进行了再次细分，把只与本地下属单位有关的舆情归纳到“本地敏感”可以定义多个邮件、多个手机，可以定义任务启动时间、间隔和报警方式。首页报警敏感报警本地敏感报警报警设置报警任务可以根据自己的工作习惯和工作需要，定制报警任务3、项目建设内容-系统设置项目概述1总体架构及关键技术32汇报提纲项目建设内容项目效益分析项目报价454、项目效益分析通过信息关联分析与共享、人工经验知识分享与机器自动学习相结合的方式，实现对网络舆情信息的研判与事件综合分析预测。网络舆情监测平台对采集到的舆情信息进行趋势分析，舆情分布、影响力查询等快速掌握舆情发展动向，为领导提供决策作用。运用网络爬虫和大数据技术替代人工浏览的方式，减少人工查看舆情，人力投入转到对舆情信息结果的处理和防范等重点上。网络舆情基于自然语言理解的文本挖掘技术，提高了交通相关部门对于网络舆情的应对能力和快速反应能力，加强了对社会面信息的全面动态控制能力。有效的部署工作人员经济和社会效益降低人工对比分析误差提高管理效能为领导提供决策依据项目概述1总体架构及关键技术32汇报提纲项目建设内容项目效益分析项目报价455、项目报价产品名称产品型号数量金额（万元）软件开发网络舆情监测系统1套硬件采购服务器和办公电脑1批软件采购Oracle12c企业版1套服务器管理和运维服务费服务器管理和运维服务费按年计算合计：万元本项目报价包含软件开发、软硬件采购、服务器管理和运维服务等费用。总报价为各个子系统的总和，各系统报价由工时组成。谢谢！！