安码网络舆情监测系统技术白皮书-市场版v1.1

网络舆情监测系统技术白皮书 目录第一章 概述31.1 网络舆情现状31.2 网络舆情监测系统背景3第二章 安码网络舆情监测系统介绍42.1 系统概述42.2 网络舆情检测系统架构52.2.1舆情采集子系统52.2.2舆情分析子系统52.2.3舆情管控子系统5第三章 舆情监测系统功能参数6第四章 安码网络舆情监测系统技术亮点6第五章 安码网络舆情监测系统优势7第六章 安码科技有限公司简介86.1 灾备技术国家工程实验室86.2 教育部网络攻防重点实验室96.3 北京邮电大学信息安全中心96.4 工业和信息化部通信行业职业技能鉴定指导中心106.5 中国信息安全认证中心10第一章 概述1.1 网络舆情现状随着信息网络的快速发展，中国的网民达4.57亿人，互联网普及率达到32.6，继续超过世界平均水平。越来越多的社会民众通过网络来表达自己的态度、观点、意见、要求等，从而互联网能更快速、更直接、更尖锐、更真实地映射出社情民意。互联网已经为我国锻造出一个全新的舆情传播机制，社会民众可以通过新闻与评论、网络社区与论坛(BBS)、博客(Blog)/个人空间、即时通讯软件、电子邮件(E-mail)和手机短信平台等多元化渠道来发布、获取和传递信息，使得网络舆情成为映射社会舆情的实时晴雨表。某一话题或事件，发展成为网络舆情一般经过四个阶段：公共事务的发生；刺激性消息的传播；个人情绪、态度、意见的形成；舆情的形成和表达。很多突发事件只要涉及官员、警察、城管、司法、央企、富人、下岗工人、小商贩、农民工、房价、物价等敏感因素，很容易引发铺天盖地的舆论声浪。特别是近几年我国通过网络爆发的重大舆情事件激增，都不同程度地掀起了网络舆情浪潮。通过总结之前的突发事件和热点事件，如拉萨“3·14事件”；“三鹿毒奶粉事件”；瓮安、孟连等地的群体性事件；“双汇事件”；“局长微博开房事件”； 2008年7月北京青年杨佳在上海持刀杀死6名民警，刺伤3名民警和一名保安事件；河北大学撞人引发的李刚事件等不难发现网络舆情有如下特点：直接性、突发性、丰富性、互动性、偏差性。因此，网络舆情的传播是一把“双刃剑”，它对我国如何利用、管理和引导新形式形成的舆情提出了更高的要求和挑战，如果不能及时对网络舆情进行有效地监测与预警，就会给社会舆论安全乃至国家稳定与和谐发展带来一系列消极影响。1.2 网络舆情监测系统背景最近几年来，我国的一些政府管理部门联合了部分国家科研机构和公司，开展了针对特定的网络舆情信息、社会犯罪信息、网络军事情报等相关信息进行监测管理相关的一系列系统与关键技术研发和应用系统部署工作。包括国务院新闻办、工信部、广电总局、总参三部、公安部、安全部等部门分别已经或者即将研制部署实用系统，目标是对相关的互联网舆情信息进行有效地搜集、整理、分析与控制，从而形成高效畅通的网上舆情发现、分析、监管、预警、处置和反馈机制。其中，工信部等部分部委已经形成了较好的网络特定信息获取基础业务平台。2011年5月，国务院成立了国家互联网信息办公室，该办公室将“在职责范围内指导各地互联网有关部门开展工作”。这些工作包括：落实互联网信息传播方针政策和推动互联网信息传播法制建设；指导、协调、督促有关部门加强互联网信息内容管理；负责重点新闻网站的规划建设；组织、协调网上宣传工作，依法查处违法违规网站。为了满足政府、教育、金融、电信等宣传部门加强对网络舆论的及时监测、有效引导，以及对网络舆论危机的积极化解的需求，北京安码科技有限公司通过多年技术积累推出安码网络舆情监测系统。 第二章 安码网络舆情监测系统介绍2.1 系统概述安码网络舆情监测系统利用互联网信息采集技术、信息智能信息处理技术和全文检索技术，对境内外网络中的新闻网页、论坛、贴吧、博客、新闻评论等网络资源进行全网采集、定向采集和智能分析，提供舆情信息检索、热点信息的发现、热点跟踪定位、敏感信息监测、辅助决策支持、舆情实时预警、舆情监管、统计分析等多层次、多维度的舆情信息的服务，根据用户的网络舆情监测和定向追踪等信息需求，形成简报、报告、图表等分析结果，从而帮助政府、企业及时掌握舆情动向。更重要的是，安码网络舆情监测系统能准确捕捉预警信息，对有较大影响的重要事件做到快速发现、及时处理，从正面引导舆论和宣传，构建积极向上的主流舆论，并为政府、企业决策提供信息依据。对不同政府、企业和行业监管等职能部门而言，舆情监测的需求既有通用性，也有个性化的特点存在，安码网络舆情监测系统具有极大的扩展性，凡是需要对舆情、民情关注的政府、企业、机构都可以通过本系统进行量身打造，建立适合自己的舆情监测体系。2.2 网络舆情检测系统架构安码网络舆情监测系统分为舆情采集子系统、舆情分析子系统和舆情管控子系统三个子系统，包括信息采集、加工处理、舆情服务等多个功能模块。图 1 网络舆情系统部署图2.2.1 舆情采集子系统根据信息源的分布和规模，对一种信息通道可以建设多个分布式的采集子系统，获取的信息经过初步筛选、去重后传输到数据中心集中存储和加工。2.2.2 舆情分析子系统对舆情信息进行统一存储管理，并对话题进行分析跟踪、对话题倾向性进行分析，针对网络社区进行舆情挖掘，对重点ID进行跟踪，对舆情内容进行过滤和检索。2.2.3 舆情管控子系统舆情管控子系统是网络舆情监测系统的核心系统模块，直接面向特定用户提供服务，根据业务需要，实际建设时可以灵活地组合和部署，基于数据中心向用户提供热点话题跟踪、突发事件预警、舆情通报、舆情态势发布、舆情信息控制、专项监测、系统配置等功能模块。第三章 舆情监测系统功能参数模块名称模块功能说明信息获取模块实时采集天涯论坛、百度贴吧等国内主要论坛、博客、 BBS，收集关于客户及其相关信息；实时检测本地论坛、博客、 BBS， 收集敏感信息；检测网站的采集周期可以按需定制，最短分钟级； 提供信息爬取的日志信息。信息分析模块判断帖子的倾向性；每天给出论坛热点；给出话题发展趋势；对有爆发趋势的敏感帖子提前预警；对敏感话题持续追踪；对敏感贴作者持续追踪；对帖子自动聚类生成话题，发现新话题；对新帖子自动分类至相关类。信息展现模块实时从多个维度分类展现舆情信息；自动展现与关键词关联的信息（按范围、词义关联）；话题追溯与舆情趋势分析；自动生成舆情日报、周报，季报；敏感话题出现频率网站排行榜。通知模块屏幕通知；email 提示；手机短信提示（需要配置短信网关）。系统配置模块用户能增添相关网站；用户能设置检测关键词；信息抽取自动进行不需要手工配置。舆情信息源自动发现模块论坛网站自动发现，一是推荐，二是自动加入。舆情发起者智能管理模块自动追踪舆情发起者所发的信息内容，并对其进行追踪及管理，建立信任档案。舆情智能采集模块同类词智能扩展；舆情关键词模糊匹配；舆情关键词语义匹配。舆情智能引导子系统智能机器人发贴自动引导。舆情智能服务子系统舆情处理协助信息，提供舆情发起者的联系方式以及对该舆论事件处置的建议解决方案。第四章 安码网络舆情监测系统技术亮点a) 基于广度和深度的多维度搜索引擎技术研发，深度追踪突发事件的发展态势，提升信息爬取效率；b) 自动匹配网页有效信息，自动发现相关话题网站并添加至监控网站；c) 智能舆论引导：自动判断舆情信息的倾向性，并根据判断引导网络媒体及自由人发表正确倾向的意见和言论等；d) 安码网络舆情危机公关服务中心：包括对获取信息的自动分析和处理、多种方式的网络舆情预警机制、引导舆情倾向的同时，提供与舆情信息发起者的互动模式；e) 舆情智能采集：同类词智能扩展，如设置“集会”关键词，会自动匹配“游行”的关键词；模糊匹配，如设置“”关键词，会自动匹配“法*轮*功”、“法-轮 功”等的关键词；语义匹配，如设置“奶粉”关键词，“三鹿”、“雀巢”、“雅士利”等会自动匹配。第五章 安码网络舆情监测系统优势在功能方面安全码网络舆情监测系统集中具有如下优势：1) 实现对互联网海量信息的全天候监测，分钟级更新；2) 实现批量关键词搜索监测和定向网站监测。监测的重点在于论坛、贴吧等舆情集中的载体类型，能够实时地采集帖子的转载数、点击数和回复数，实时采集跟帖；3) 对监测贴吧、博客、BBS等网站内容进行倾向性分析，并可以智能引导回帖，扭转采集内容的倾向性，达到一定的公关效果；4) 通过采用自学习智能模式，构建模糊匹配、语义匹配、同类词匹配的关键词多维匹配词典，最大范围检索到全网中的关键词相关信息；5) 以舆情门户的方式集中展示舆情信息、统计数据和工作导航，为领导和舆情工作人员提供舆情浏览；6) 舆情监测：行业舆情、参考舆情，负面舆情、热点舆情、舆情来源、舆情载体；7) 分类舆情：拟监测的人名、地域、机构以及不同监测对象的分类；8) 专题趋势：对重点事件，敏感事件的专题进行跟踪，反映其在互联网上的传播趋势和统计数据；9) 舆情工作：智能化生成舆情报告，方便进行舆情加工、维护，通过网页探针和舆情追踪等功能实时进行舆情监测；10) 统计分析：自动生成最新的统计数据和预警信息。按照人名、地名、机构名称、分类、专题自动产生统计数据。第六章 安码科技有限公司简介北京安码科技有限公司(简称“安码科技”)是一家孵化于北京邮电大学信息安全中心与灾备技术国家工程实验室的高新技术企业，隶属于中关村科技园区。公司业 务涵盖网络安全、应急通信、存储灾备、行业信息化应用等多个领域，为客户提供完整的信息化系统解决方案、校企合作支持以及安全存储咨询培训服务。 安码科技拥有一支以多位教授和博士生导师为核心的200多人的研发团队，其中博士学历 占10，硕士学历达到80，同北京邮电大学、北京大学、成都电子科技大学、北京交通大学、山东大学等多所重点院校建立了技术科研与人才战略联盟。 安码科技拥有发明专利技术近50项；获得了海淀区科委科技专项、北京市中小企业创新基金（A类）以及科技部科技人员服务企业计划行动支持等；承担了国家发改委信息安全专项“面向重点行业的信息安全风险评估咨询与培训能力建设”项目；与清华大学、北京邮电大学、中科院等单位联合承担了国家发改委“灾备体系研发建设”项目以及工信部“新一代宽带无线移动通信网”课题；荣膺2009年中关村科技园区TOP100企业成长榜第四名、“2009年中关村中小创新企业十佳年度企业”、北京市专利试点合格单位、2010年度安全贡献奖、2010年中国计算机行业发展成就奖、2010年中国网络安全领域金服务奖等荣誉称号。北京安码科技有限公司的主要支撑单位包括灾备技术国家工程实验室、教育部网络攻防重点实验室、北京邮电大学信息安全中心、工业和信息化部通信行业职业技术鉴定指导中心、中国信息安全认证中心，各支撑单位简介如下：6.1 灾备技术国家工程实验室2008年8月，作为容灾备灾领域全国唯一的一个国家级实验室，灾备技术国家工程实验室（简称“工程实验室”）在北京邮电大学正式成立，工程实验室主任由北京邮电大学信息安全及密码学专业博士生导师、首届、全国政协委员杨义先教授担任。工程实验室是一个相对独立的科研实体，围绕国家重要信息系统灾备建设的重大战略任务、重点工程对技术进步的迫切需求，整合灾备产业创新资源，为灾备产业技术的供给提供重要保障；衔接基础研究和产业研发，组织开展原始性产业技术创新活动，引领