搜索
互联网信息搜索与监测系统白皮书江苏金鸽网络科技有限公司2014年7月目录一、开发背景.....................................................1二、系统概述.....................................................1三、系统结构.....................................................2四、功能简介.....................................................3(一)信息采集...................................................3(二)信息监测...................................................4(三)智能分析...................................................5(四)信息预警...................................................5(五)统计报告...................................................6(六)舆情导控...................................................7(七)辅助功能...................................................8(八)系统管理...................................................9五、系统特色.....................................................9(一)深度与广度相结合的信息采集方式.............................9(二)基于语义的负面信息过滤技术.................................9(三)智能的行业核心智能体......................................10(四)信息采集智能调度..........................................10(五)属性自动提取技术..........................................10(六)来源规则匹配技术..........................................10(七)黑名单网站自动发现技术....................................10(八)移动终端信息展示技术......................................11六、运行环境....................................................11七、公司资质....................................................13八、联系方式....................................................14江苏金鸽网络科技有限公司ISO9001/ISO27001/CMMI三1/16一、开发背景根据《第33次中国互联网络发展状况统计报告》，截至2013年12月，中国网民规模达6.18亿，互联网普及率为45.8%。其中，手机网民规模达5亿。中国进入“大众麦克风”时代，各类网络媒体如微博、微信等新兴媒体层出不穷，导致社会舆论格局发生巨大变化，每一位网民和手机用户都可能成为“公民报道者”，在一些突发公共事件中经常成为第一信源。特别是微博客、微信的异军突起，成为新闻曝光和舆论发酵的重要平台，信息的传播速度足以在数小时内传遍全球，因此，及时掌握舆论相关信息，无论对政府还是企事业单位，都有着至关重要的意义。由于互联网具有虚拟性、隐蔽性、发散性、渗透性和随意性等特点，越来越多的网民乐意通过这种渠道来表达观点、传播思想。但是，网络信息存在很大的不可控性，使网络更容易成为一种非理性的表达渠道，任何一个被关注的事件，都容易在网上产生舆论风暴效应，短时间内形成新闻热点，进而对政府、公众产生巨大的舆论压力。为了有效的解决舆情管理工作中存在的滞后、被动的弊端，达到全面、及时的获取互联网信息的目的，需要建立互联网信息搜索与监测系统，形成全方位的监测网络体系，实现手工监测模式向信息化监测模式的转变。二、系统概述互联网信息搜索与监测系统软件，是一款集信息的搜索、采集、分析、预警、整合、呈报、导控为一体的海量信息挖掘工具软件，以实现“发现信息源头，追踪传播路径，监控传播主体，导控舆论倾向”为总体目标。系统针对不同行业的业务需求，在领域专家的协助下，实现对互联网上的论坛、博客、新闻、贴吧、微博、搜索引擎、微信等各类媒介信息的精准搜索与实时监测；系统采用自然语言理解、知识挖掘、本体构建等核心技术，对信息进行有效的提取、分析、过滤、聚类、分类和预警，以满足广大用户对信息“及时性、全面性、智能性、精准性”的使用要求；系统提供官方信息权威发布和精准信息定向回复功能，以达到“早监测、早发现、早处置、早导控”的目的。江苏金鸽网络科技有限公司ISO9001/ISO27001/CMMI三2/16三、系统结构系统采用B/S（Browser／Server，浏览器／服务器）系统结构。数据的分析和存储由位于网络中心的服务器处理，不管是系统管理员还是终端用户，都通过浏览器来访问本系统获取、分析和处理信息。这种结构能做到真正的分布式网络计算，有效降低网络流量，减轻客户端负担，还能安全、方便地与互联网接口。另外用户分布或行走于全国各地，通常都有移动办公需求，系统提供移动终端访问接口，用户只需随身携带移动通信设备，就可以访问系统，获取最新舆情信息。系统结构图江苏金鸽网络科技有限公司ISO9001/ISO27001/CMMI三3/16四、功能简介系统首页(一)信息采集系统采用定向采集和全网搜集相结合的信息采集方式，针对与日常业务具有密切关系的网站进行实时监控，使网站的任何新的信息能快速及时的被采集。(1)内置的搜索信息整合功能系统内置了几十个搜索引擎，支持对知名新闻媒体、论坛、贴吧及微博网站、微信平台的站内垂直搜索，扩大了信息采集的范围。管理员根据系统的运行状态、服务器资源使用情况，灵活设置搜索引擎的启用或暂停，提升系统搜索引擎的自动调度能力。采用基于知识库的信息提取技术，过滤掉部分无效的信息，提取出关键、敏感的信息，达到精确搜索。(2)新闻、资讯类网站的采集系统支持对新闻网站上的新闻、资讯信息的采集，可以采集信息中的标题、作者、来源、时间、正文、点击率等信息项，可采集网站包括新华网、人民网、中国政府网、新浪新闻、搜狐新闻、联合早报、路透中文网、中国网、环球网、网易新闻、正义网等等。(3)博客类网站的采集系统支持对博客网站上的博文信息进行采集，可以采集博文标题、发表时间、江苏金鸽网络科技有限公司ISO9001/ISO27001/CMMI三4/16内容、标签、分类、评论、评论人、阅读人次、转发量等信息项，可采集网站包括新浪博客、博客网、网易博客、搜狐博客等等。(4)论坛、贴吧类网站的采集系统支持对论坛、贴吧网站上的发帖回帖信息进行采集，可以采集帖子标题、发表时间、发帖人昵称、帖子内容、浏览次数、回复次数、回帖人昵称、每个回帖内容等信息项，可采集网站包括强国论坛、天涯社区、西祠胡同、新浪论坛、百度贴吧等等。(5)微博、微信类网站的采集系统支持对新浪、腾讯、搜狐、网易等各大微博网站上的信息进行采集，同时支持对微信平台信息的搜索采集，可以采集微博网站首页的热点信息、各行业及政府机关的官方微博信息、指定用户ID的微博上的信息。(6)个性化采集目标的一键式配置过程用户除了可以在公共采集目标中勾选自己所关注的采集目标外，还可以自己新增自定义采集目标，自定义采集目标是用户个性化的，只有管理员可以看到，其他用户是看不到的。系统采用自动化的采集目标配置过程，用户只需要输入网站的地址，就可以实现的对该网站的采集。网站的类型、编码、时间格式以及版面、子版面等信息参数系统都能自动获取，无需用户配置。(二)信息监测系统将互联网的信息监测分为六种：本我监测、业务监测、行业监测、人员监测、事件监测、定向监测。本我监测，主要监控网络上与本单位密切相关的信息，比如信息中提到本单位的某个人、某个部门或者某件事，只要涉及到本单位的信息，就可以监测到，并自动归集到预先设定的本我监测类别。业务监测，主要监控网络上与本单位业务范围密切相关的信息，比如检察院，关注的就是检察系统工作中感兴趣的信息，为检察工作提供案件线索、分析事件发展态势等，比如反贪、渎职、公诉等等相关的信息，只要与本单位业务相关，就可以监控到。行业监测，主要监测互联网上同行业兄弟单位的最新信息。江苏金鸽网络科技有限公司ISO9001/ISO27001/CMMI三5/16人员监测，主要用来对本单位主要领导、关键岗位或对本单位影响较大的相关人员的监测，采用智能化生成规则的方式，可根据用户需要，生成几十、几百、甚至上千条监测规则。事件监测，主要是针对已发生的或者将来可能发生的重大突发性事件进行监测。用户可以选取系统内置的特征词，也可以自定义需监测事件的特征词，用来完成对网络上舆情信息的有效挖掘、及时监测。定向监测，可以对新浪、搜狐、腾讯、网易等主流微博进行定点监测，还可以对百度贴吧、微信进行定点监测，保证第一时间获取关注对象的信息。(三)智能分析系统采用多维的信息分析统计技术，对网络突发事件从发生、蔓延、高潮和缓和各个阶段的信息分布、媒体传播趋势、媒体分布及起源信息进行分析，并以图文并茂的形式直观展示网络舆情的动态。智能分析(四)信息预警监测预警是一种时效性要求很高、重要程度要求很高的精准网络舆情监测功能。监测预警包括监测和预警两个过程，当系统监测到舆情信息后将及时发出预警，让相关人员第一时间掌握舆情状况。本系统预警方式分为三种：在线弹框预警、手机短信预警和电子邮件预警。江苏金鸽网络科技有限公司ISO9001/ISO27001/CMMI三6/16系统采用信息分级预警机制，用户可根据自身需求自由设置信息的预警方式、预警周期、预警对象以及预警条件。用户可以设置当系统监测到突发事件发生时，以短信、邮件等方式及时通知相关人员，实现及时预警、快速处理舆情的效果。用户无需时刻盯在电脑桌前就可查看和处理最新的监测信息，真正实现把用户从繁忙的舆情监测工作中解放出来。预警设置(五)统计报告系统提供舆情专报、简报和舆情统计汇总表三种报告形式，用户可以针对某个舆情事件生成专报，记录事件的来龙去脉，也可以从信息列表中勾选一些重要的信息生成信息简报，向相关领导汇报，还可以统计一段时间内的舆情详细信息，方便管理人员整理归档，此外系统还支持专报的自动生成功能。系统提供媒体统计、专题统计和预警统计三项综合统计功能。媒体统计功能可以直观的反映出近阶段用户的工作重点偏向于哪些媒体，在舆情引导工作方面做到“有的放矢”。专题统计功能可对比反映出各个专题监测的当前网络转播态势，指导用户开展处理工作的优先。江苏金鸽网络科技有限公司ISO9001/ISO27001/CMMI三7/16媒体统计(六)舆情导控舆情导控包括舆情管理、导控日志两个功能。舆情管理实现单位重大舆情信息的归集管理功能。本功能提供论坛、贴吧、微博的官方权威信息发布功能。结合系统中的媒体分布分析、信息起源追踪等功能，系统可以通过发布官方声明、事实真相、表明态度等信息，预防舆论激化、舆论一面倒的情况出现。除了官方权威信息发布，系统还提供各大论坛、微博、贴吧的定向回复功能，对于个别信息进行有针对性的一对一对话，通过回复网上的帖子、微博、贴吧等澄清事实真相、警告煽风点火的网民，从而到达引导舆