互联网广告监测系统产品介绍-V1.0

第1页共12页互联网广告监测系统产品介绍——V1.0前言网络广告已经从新兴的广告传媒逐渐发展为不可缺少的广告传播方式，受众群体数量庞大，传播方式直观快捷，具有传统媒体不可比拟的优势，这同时也给相关政府只能部门带来了很大的监管难度，由于其发布的灵活性、随意性使得监管难度极大，在很长一段时间内，基本处于无监管状态。我公司经过近10年的广告市场调查与研究，结合传统广告监测特点，历时3年研发，开发出了一套较为完善的网络广告监测系统，成为国内较早拥有网络广告监测产品的供应商。该产品能对全网内的所有网站、论坛等所有以网页形式存在并发布信息的数据源进行全天候24小时监测，无须人工处理，系统全自动采集所有的数据信息，结合系统智能识别系统，可以做到筛选95%以上的广告信息，大大减少了信息处理量，提高监测效率，使得以往监测互联网广告时工作人员要面对成千上万的广告信息只在几秒钟间就处理完成，使得监测互联网广告变不可能为可能。同时，产品具备多个目前国内领先的技术手段，专为工商监管打造的独有功能模块，使得互联网广告的采集、识别、判定、取证、办案、查询、统计真正得以实现。真正具有实际使用价值。第2页共12页系统运行的操作系统环境、Web服务端、系统组件、数据库均支持当前主流产品，成熟度高，兼容性强，运行稳定，系统由几大功能模块组成，具体如下：一、网络广告采集处理系统（技术国内领先）网络广告特征根据目前我国网络广告已出现的问题，根据广告法，有针对的采集监测网络广告：一是网络广告的主体资质问题，个人可以成为网络广告的发布者，这与广告法相冲突；二是广告法的地域法律适用问题，广告法无权管辖在境外发布的广告；三是广告内容的合法性问题，网络发布烟草广告；四是隐性广告问题，通过网络新闻或论坛形式发布广告等。网络广告根据其外表特点和存在形式，其类别大致有以下几种：(１)全屏广告(２)伸缩通栏广告(３)通栏广告(４)擎天柱广告(５)横幅广告（旗帜广告）(６)一般按钮广告第3页共12页(７)鼠标响应按钮广告(８)一般浮动图标广告(９)鼠标响应浮动图标广告(10)弹出式广告(11)画中画广告(12)文字连接广告(13)流媒体视频广告网络广告存在的主要技术形式（存储格式）：(１)Txt/html(２)Gif(３)Bmp(４)MacromediaFlash(adpcm/mp3/wave/……)(５)jpg(６)png(７)tif(８)流媒体根据上述形式和特点自动分析网站页面，将广告疑似内容采集到本地服务器以便进行分析。采集的全面性和正确性很大程度上取决于上述存在形式的全面性和特点的无歧异性和可分析性。上述很多类型是可以成功识别的，如：假设一般浮动图标大第4页共12页部分为广告，其采集正确几率为95%；一般弹出式页面为广告，为广告的几率占90%。当然，很多广告类型与正常内容区别不大，计算机无法自动判别，如文字连接广告的特点是文字连接，但如果根据文字连接获取疑似广告，则正确性仅达5%，严重影响监测质量和加大人工干预的工作量。网络拓扑图网络广告采集服务器sinasohusofunINTERNET外网内网坐席终端广告业务系统网络广告采集结果网络登记程序1。分析网络广告采集结果。2。将重复广告进行自动登记。3。录入新广告信息。4。违法广告判定5。将网络广告纳入广告业务系统网络传输程序网络广告采集系统在外网部署自动网络广告采集程序，通过开发专用软件自动随时地通过HTTP协议获取指定网站的广告页面，并且能够将广告的素材下载到外网广告采集服务器上。采集范围：互联网广告发布主要通过网站、论坛进行发布。网站服务器遍布全国甚至全世界。所以，互联网广告监测需要进行全网数据采集，而不能仅仅在本市管辖的IP段内。第5页共12页采集数据量：进行全网监测的数据采集将是海量数据，需要配备大容量存储设备和高性能服务器来完成，必要时可以依靠云存储和云计算技术来实现。数据筛选：海量数据中有效数据仅占极少部分（不足千万分一），需要依靠智能数据筛选技术来实现有效数据的提取。通过对关键字的定义、词义组合、模糊判断、关联词识别等技术手段来实现，不依靠人工，使得在我局在现有人员数量下处理海量数据得以实现。网络广告登记工作人员对采集到的新广告进行分类处理，如果是广告，则将该广告作为样本进行登记，系统将采集广告的广告样本作为检索条件在指定网站进行检索找出重复的广告并提醒工作人员进行判别登记，从而大大减少工作人员的工作量。形成广告样本结果后，将广告结果传送到内网，使用网络广告登记系统，登记广告信息以及判定违法，完成网络广告的采集，从而最终将网络广告纳入广告监管系统中。二、涉嫌违法研判子系统该系统主要为了实现对网络广告中发生的涉嫌违法行为进行广泛收集、研究和判别。根据系统的智能分析功能，一旦发现第6页共12页和定位涉嫌违法信息，立刻收集取证并报警。同时可以制作版本信息，像传统媒体广告监测一样进行违法判别，它与执法取证云系统和网络舆情监控系统相配合。三、电子取证及证据固定子系统（独有功能）由我司提供国内唯一具有司法权威性的取证云服务。可以满足对互联网广告的电子取证及证据固定需求。彻底解决互联网电子广告无法有效取证和不具备法律效力的问题。（数据司法有效性：互联网广告的抓取都是通过保存网页、图片、音视频、文档等电子证据，不具备法律效力。需要通过技术手段完成电子证据的固定和认证，使其具备司法有效性，使得互联网广告监测更具权威性和有效性。）实现对违法信息取证后上传云端进行存储和公证，一旦公证固定后即具有法律效力，它与涉嫌违法研判系统和网络舆情监控系统相配合。执法工作云可以通过执法调度，让各区县分局及工商所人员进行电子证据的固定、取证和录像取证,来保证工商执法的即时性和执法证据的司法有效性；所有通过该系统获取的证据可以直接由第三方出证，具有法律效力。执法云系统分为自建和租用两种方式。自建需要更大的费用。租用则简单得多，只需要付出租金，租用远端的超级计算机第7页共12页完成取证公证任务即可。以我局目前情况及业务量，建议采用租用方式较为可行。四、执法办案子系统（独有功能）：通过提取到的违法广告数据以及其关联信息进行分析、挖掘和提取来收集案件线索。必要时可通过系统的“人肉搜索”功能对严重违法的广告发布者、传播者等相关信息（电话、姓名、地址等）进行破解（QQ密码、邮箱密码、网站登录权限等）和收集。最后提供的案件线索真实性和有效性高达80%以上（能够保证办案人员掌握确切姓名、地址、电话等重要信息）。线索发现：线索发现可实现对未知线索的实时监测，主要通过关键字的方式实时监测互联网上相关的线索信息。专项任务：专项任务可针对已知线索和新线索的查找，数据主要来源基础库、及时搜、搜索云。系统根据这些信息，提取出相应的线索数据。系统支持对线索进行归档、建立人物库、并给出线索分析模型。人物百科：当用户找到了相关人物后，可以建立人物库，完善它的基本信息（电话，QQ，手机，地址，公司，真实姓名等），并存储该重点人的线索以及人物关系。同时可对用户的QQ和EMAIL可以下发进行IP落地取证。线索取证：该功能主要是获取QQ和EMAIL的IP地址，可以记录跟踪中的QQ登陆的所有IP情况。第8页共12页批量导入专项任务：当我们已经掌握很多零散的线索时，我们可以通过导入一个模版，系统会批量进行线索查询。完成后系统自动会把查询的结果反馈出来。这样对涉嫌违法事件、人员将给出一系列详细信息，供执法人员执法办案。五、舆情监控系统：主要为了实现对网络上的相关舆论进行监控、跟踪和预警，掌握舆论走向，预测其发展方向。同时与网络广告相关联的网络情报进行收集、整理和分析。及时发现与“我”或与“产品”相关的舆论情报信息，负面信息、重大舆情及时预警。提供定性定量的舆情研判分析，准确研判具体舆情或者某一舆情专题事件的发展变化趋势。自动生成舆情报告和各种统计数据，舆情导控等创新手段，提高舆情工作的质量和效率，辅助领导决策。配合广告监管系统，对网络广告的发布、沟通等信息交流进行监控和分析。举例：以南京“青奥会”为关键字。监测搜索网络上与青奥会相关的所有产品信息。发现负面的、涉嫌欺诈的、涉嫌夸大宣传的等等信息（例如青奥纪念币、邮票等）。可及时汇总并预警。针对大型门户网站、论坛、交易平台的专项监管此功能模块为我司根据用户需求最新研发出的功能模块，主要针对目前各大网络交易平台日益增多的网络交易纠纷而设计第9页共12页的。随着大型综合性、交易性网站的快速发展。广告成为网站的主要收入来源之一。违法违规广告也大量存在于网站之中。随之而来的纠纷、投诉和举报也不断增多。就这种情况，我司专门研发针对大型网站的监管模块，对于符合我局管辖范围内等条件的信息进行情报采集，一旦符合投诉、虚假、诈骗等条件，可快速搜索提供办案线索，有效的打击发布人的不法行为。彻底改变一直以来对于网络广告案件难以管理难以处罚的现状。六、对外接口模块：系统接口，与我局业务系统、省局业务系统、国家局业务系统、药监等其他政府业务平台进行对接。保证数据共享及互联互通。尤其是国家局和省局的监测数据定期下发，省局的平台软件的联网互通。都要求了此平台在接口的标准、通用性、兼容性上需要百分百达到要求，实现兼容。七、综合查询系统可以查询到所有广告的信息数据，包括视频、文字、图片、音频等等。以及发布人的真实线索、案件信息、舆论情报等。支持智能关键字查询、模糊查询、条件组合查询等。八、后台维护管理系统用户管理、系统设置、关键词管理、采集任务管理、远程维护等。第10页共12页九、统计分析系统系统对采集、录入广告数据进行整理、抽取和统计分析。按照不同的要求生成不同类型的报表，并为监测报告提供丰富统计分析数据和直观多样的图形格式。面向专网（工商网）和外网（互联网）的用户提供相应的统计分析结果。江苏省广告监测中心使用国际上先进的智能分析平台进行数据的分析、挖掘，为领导决策提供支持。系统通过对广告系统中的的原始数据和信息进行汇总、统计、分析，形成各种动态、静态统计报表，并可以对专项事件进行趋势预测。1.任意分析系统要求能够高度智能化，能够实现以下任意分析：任意数据指标：可以通过组合申诉（投诉）、举报、咨询、建议在登记、处理全过程产生的各项数据指标形成报表。任意展现形式：可以采用饼图、柱状图、曲线图、二维、三维图表……来展示。任意输出方式：可以采用Excel、PDF、图片（JPG）、HTML文件等格式直接输出。任意数据来源：可以使用Oracle、SQLServer，Sybase等主要数据源作为分析对象。任意分析互动：可以直接在分析报表上进行分组、合并、汇总、旋转、过滤、排序、钻取等操作。第11页共12页2.处理流程3.分析样本统计分析1)按照广告发布量划分、2)按照违法广告发布量划分；3)按照广告违法率划分；第12页共12页4)按照广告商品、服务的种类、行业别划分；5)按照涉嫌一般违法、虚假广告性质划分；6)按照发布的媒体大类划分；按不同标准对采集的数据进行统计分析,自动生成报表；按固定格式自动生成电视、广播、报纸、网络、短信广告的周、月、季度、年度监测报告，并可供下载。十、监测报告统计分析系统通过自动的综合分析报表系统产生的报表，每月自动生成固定格式（word格式）的监测报告。涵盖了当月重点监测的媒体和商品类别，突出当月存在的重点问题。例如具体内容可以包括：涉嫌违法广告发布情况，包括按照重点监测行业分类和按照重点监测媒体分类等等。也可以自行任意设置时间段，发布日报、周报、季度报、年报等多种监测报告。十一、符合客户具体需求的系统我公司根据不同客户需求，量身定制不同的监测系统，充分体现以人为本的产品理念，对各地工商局用户的具体需求进行前期调研然后进行二次开发，最后形成最适合该客户广告监测系统。