易宝网络舆情监控应用系统v20软件产品说明书

易宝网络舆情监控应用系统软件产品说明书1易宝网络舆情监控应用系统v2.0软件产品说明书易宝电脑系统(北京)有限公司易宝网络舆情监控应用系统软件产品说明书2目录1产品说明.....................................................................................................................................32产品架构.....................................................................................................................................43产品功能.....................................................................................................................................53.1舆情采集.........................................................................................................................53.1.1支持网页结构自动分析....................................................................................63.1.2支持基于模板的元数据解析............................................................................63.1.3内嵌Javascript脚本执行引擎..........................................................................63.1.4支持RSS解析...................................................................................................73.1.5支持境外网站监控............................................................................................73.2舆情信息存储和智能检索............................................................................................73.2.1中文分词.............................................................................................................73.2.2内容相似性分析................................................................................................83.2.3基于规则自动分类............................................................................................83.2.4基于内容自动分类............................................................................................83.3舆情管理.........................................................................................................................83.3.1舆情信息分类....................................................................................................83.3.2舆情用户、组织管理........................................................................................83.3.3舆情统计、分析................................................................................................93.4舆情服务.......................................................................................................................10易宝网络舆情监控应用系统软件产品说明书31111产品说明舆情是指在一定的社会空间内，围绕社会事件的发生、发展和变化，民众对社会管理者产生和持有的社会政治态度，它是较多群众关于社会中各种现象以及问题所表达的信念、态度、意见和情绪等表现的总和。随着互联网发展的日益深入，网络已成为当今社会信息传播的主要媒介之一，网络舆情迅速形成，对社会影响巨大，不仅需要各级党政干部密切关注，也值得社会各界高度重视。为了进一步加强互联网新闻宣传和信息内容的安全管理，各级政府部门迫切希望及时了解舆论动向，引导舆论发展，制定出正确的策略方针，并能及时采取措施进行有效的干预。因此，基于互联网的舆情监控对于了解社情民意，缓解舆论压力，建设和谐社会具有重要作用和意义。易宝网络舆情监控应用系统（eOMS）能够实时监测跟踪网络舆情，为政府机关、企事业单位提供真实、可靠、实时的舆情监测、分析和预警。eOMS内置监测范围覆盖了国内数百个主流媒体站点和政府站点，上百家论坛、贴吧、博客，实时并行监测、汇总和分析互联网上的舆论热点。系统具有灵活的可定制性和可扩展性，可根据用户需求进行量身定制。eOMS®将帮助您快速全面地了解整个互联网对企业、政府单位和舆论焦点报道和讨论的历史演变、第一时间抓住突发事件、全自动地统计分析和报告舆情。eOMS®内核采用先进的海量文本搜索、检索技术，具有每秒钟超过数百个新增舆情文档的吞吐量，可以并行快速聚合分析和统计超过超过3年的论坛讨论信息，可以同时索引查找超过T级数量的舆情信息。主要功能有：（一）舆情采集功能：eMOS舆情采集工具在支持传统网页采集功能的基础上，实现了对论坛、博客、新闻评论等舆情信息的精准和全面采集，为舆情分析提供了丰富的数据资源。（二）舆情检索功能：eMOS全文数据库检索系统提供了强大的检索功能，可以对海量舆情数据进行高效、准确、实时的搜索。（三）舆情分析功能：eMOS提供工具使得用户可以自行设计统计内容和输出结易宝网络舆情监控应用系统软件产品说明书4果。对统计数据的排名、对时间、来源和关键词组的三维聚合分类，让您方便地从不同视角透视统计数据，直接获得不同条件下的聚合统计结果。极大程度便利了数据分析人员的操作。动态统计图、统计表、报告生成和专业的自动分析功能，也使得数据处理和专业报告撰写不再复杂。（四）舆情展示功能：eMOS提供灵活的个性化定制功能，用户可以根据自己需求配置信息分类，首页的显示内容、样式、摆放的位置、信息条数等，方便用户对系统的使用。还可以根据用户身份不同显示不同的分类栏目、统计内容等。2222产品架构eMOS舆情监控系统由舆情采集平台、舆情发布平台、舆情管理平台和舆情检索引擎四部分组成。系统架构如下图所示：易宝网络舆情监控应用系统软件产品说明书53333产品功能3.1舆情采集在网络舆情采集方面，eMOS舆情监控系统综合采用多种先进技术打造的舆情采集工具，实现了对各种舆情信息的精准和全面采集。系统内置了主流论坛、博客、贴吧、新闻媒体、政府网站的数百个监控信息源，并对这些信息源列表定期进行更新，实现用户即买即用，节省了用户部分实施部署很大一部分成本。用户还可以根据自己的需求定制采集源。易宝网络舆情监控应用系统软件产品说明书6舆情采集特色功能介绍如下：3.1.13.1.13.1.13.1.1支持网页结构自动分析论坛和新闻评论的特点是一个物理网页中一般包含多个贴子（或评论），而且随着时间的推移，同一个网页中的贴子会动态变化，有新的子贴增加，也可能有旧贴删除。搜索引擎的处理方法是一个网页解析出一份内容，这样的处理方式不能满足舆情监控的需求，对于舆情系统来说，每一个贴子都代表着一份有价值的信息，因此一个论坛或评论网页往往需要分解为N个贴子，每个贴子都作为一条独立的信息参与舆情分析。eOMS舆情采集系统实现了基于网页结构的统计分析算法，能够自动识别、分隔出论坛和新闻评论中的每一个贴子及其评论信息，并通过URL特征分析和模板识别技术实现主贴和跟帖的区分，并可以识别跟帖所属的主贴，对于跟帖分页等多种情况都可以进行正确处理。通过正确判断主贴和跟帖为下一步实现舆情分析打下了基础。3.1.23.1.23.1.23.1.2支持基于模板的元数据解析在贴子自动分隔的基础上，eOMS舆情采集系统支持基于模版的元数据解析功能，对于每个贴子可以解析出发贴人、发贴时间、贴子主题、贴子内容、点击数等元数据属性，这些属性是舆情分析的重要数据。3.1.33.1.33.1.33.1.3内嵌JavascriptJavascriptJavascriptJavascript脚本执行引擎随着Web2.0相关技术的发展，脚本语言越来越多地应用于论坛、新闻评论、博客等类型网站的建设，目的是提高用户的交互性和易用性。由于搜索引擎的采集工具一般不支持脚本语言，因此Google、百度等搜索引擎只能收录少量来自论坛、博客和新闻评论的内容。eOMS舆情采集系统内嵌了脚本引擎，能够实现网页中脚本语言的自动解析和执行，从而能够实现对于采用脚本语言的论坛、博客以及新闻评论网站的采集，为舆情分析提供全面的数据保障。易宝网络舆情监控应用系统软件产品说明书73.1.43.1.43.1.43.1.4支持RSSRSSRSSRSS解析许多博客/新闻评论采用RSS（ReallySimpleSyndication或RDFSiteSummary，信息聚合技术）实现内容共享，除了网页的基本信息，RSS一般都会包含更丰富的元数据信息，比如标题、作者、发表日期、分类、关键词等，有些RSS甚至包含更多的有价值的信息。这些元数据对于舆情分析往往具有重要的价值，eOMS舆情采集系统实现了对RSS聚合内容的自动解析和采集。3.1.53.1.53.1.53.1.5支持境外网站监控系统集成代理技术，通过代理服务器，绕过我国出、入口防火墙的屏蔽，浏览被屏蔽境外网站，监控有关涉及本地的信息。eOMS舆情采集系统在支持通用网页采集功能的基础上，实现了上述特色功能，从而能够实现对论坛、博客、新闻评论等内容的及时精确采集，为舆情分析提供了丰富的数据资源。3.2舆情信息存储和智能检索从互联网搜索到的舆情信息存储在eOMS舆情监控系统内置的全文数据库系统中。全文数据库的优势是存储海量的非机构化的信息，其采用实时动态索引技术，数据增删改时快速同步更新索引，无需重建整个索引以及局部重建索引，即数据变化后马上能检索出来，保证了信息搜索的实时性和有效性，满足舆情应用的核心检索需求。依靠专业的全文数据库存储系统，eOMS舆情监控系统可以对大量监控数据源进行长期监控，存储长达数年的数据