網(wǎng)站備案監(jiān)控系統(tǒng)

成果上報(bào)申請(qǐng)書（同2010年）成果名稱自動(dòng)、高效的網(wǎng)站備案監(jiān)控系統(tǒng)成果申報(bào)單位成果承擔(dān)部門/分公司項(xiàng)目負(fù)責(zé)人姓名項(xiàng)目負(fù)責(zé)人聯(lián)系電話和Ema訂成果專業(yè)類別*其他所屬專業(yè)部門*數(shù)據(jù)線條成果研究類別*相關(guān)網(wǎng)絡(luò)解決方案省內(nèi)評(píng)審結(jié)果*優(yōu)秀關(guān)鍵詞索引（3?5個(gè)）網(wǎng)站備案、DNS分析、Http分析、爬蟲分析應(yīng)用投資產(chǎn)品版權(quán)歸屬單位對(duì)企業(yè)現(xiàn)有標(biāo)準(zhǔn)規(guī)范的符合度：（按填寫說(shuō)明5）如果該成果來(lái)源于研發(fā)項(xiàng)目，請(qǐng)?zhí)顚懷邪l(fā)項(xiàng)目的年度、名稱和類型（類型包括：集團(tuán)重點(diǎn)研發(fā)項(xiàng)目、集團(tuán)聯(lián)合研發(fā)項(xiàng)目、省公司重點(diǎn)研發(fā)項(xiàng)目、其他研發(fā)項(xiàng)目），可填寫多個(gè)：成果簡(jiǎn)介：簡(jiǎn)要描述成果目的和意義，解決的問(wèn)題，取得的社會(huì)和經(jīng)濟(jì)效益。為了落實(shí)工信部和集團(tuán)公司對(duì)于網(wǎng)絡(luò)信息安全的要求，及時(shí)發(fā)現(xiàn)我省網(wǎng)內(nèi)未備案網(wǎng)站或含有不良信息的網(wǎng)站，以便米取進(jìn)步措施阻斷未備案網(wǎng)站和含有不良信息的網(wǎng)站，我省建設(shè)了網(wǎng)站備案監(jiān)控系統(tǒng)。該系統(tǒng)用于快速、自動(dòng)發(fā)現(xiàn)我省網(wǎng)內(nèi)未備案網(wǎng)站或含有不良信息的網(wǎng)站，可打擊網(wǎng)絡(luò)不良信息傳播等違法行為。無(wú)論未備案網(wǎng)站是通過(guò)IDC主機(jī)托管還是專線等方式接入，系統(tǒng)都可通過(guò)以下三種方式結(jié)合快速發(fā)現(xiàn)：⑴DNS分析方式；Http分析方式；爬蟲分析方式。在發(fā)現(xiàn)未備案網(wǎng)站之后，系統(tǒng)立即觸發(fā)短信告警，通知維護(hù)人員及時(shí)阻斷未備案網(wǎng)站。系統(tǒng)對(duì)于已發(fā)現(xiàn)的網(wǎng)站還可以通過(guò)〃內(nèi)容搜索引擎”這一主動(dòng)監(jiān)控技術(shù)，快速抓取網(wǎng)頁(yè)內(nèi)容，甄別含有不良信息的網(wǎng)頁(yè)，通過(guò)快照的方式保存還有不良信息的網(wǎng)頁(yè)。對(duì)于含有不良信息的網(wǎng)頁(yè)實(shí)時(shí)觸發(fā)短信告警，通知維護(hù)人員及時(shí)關(guān)閉含有不良信息的網(wǎng)頁(yè)服務(wù)器端口。該系統(tǒng)有效打擊網(wǎng)絡(luò)色情傳播、網(wǎng)絡(luò)非法銷售等違法行為發(fā)揮了不可替代的作用，保障了安徽移動(dòng)互聯(lián)網(wǎng)的健康持續(xù)發(fā)展。省內(nèi)試運(yùn)行效果：描述成果引入后在本省試運(yùn)行方案、取得的效果、推廣價(jià)值和建議等。安徽移動(dòng)網(wǎng)站備案監(jiān)控系統(tǒng)于2010年2月至3月建設(shè)，投資總額19.5萬(wàn)元。本項(xiàng)目建設(shè)，較之傳統(tǒng)流量監(jiān)控發(fā)現(xiàn)方式，共節(jié)約投資約180萬(wàn)元。該系統(tǒng)全月可完成對(duì)全省4.2萬(wàn)個(gè)IP地址的掃描。截至2011年7月共發(fā)現(xiàn)處理未備案網(wǎng)站5個(gè)，抓取含有色情等不良信息的非法網(wǎng)站2個(gè)有力的打擊了未備案網(wǎng)站和含有不良信息的網(wǎng)站。目前安徽移動(dòng)網(wǎng)站備案監(jiān)控系統(tǒng)監(jiān)控范圍覆蓋IDC及全省接入用戶，設(shè)置省級(jí)管理員用戶及市級(jí)管理員用戶，省級(jí)管理員負(fù)責(zé)全省網(wǎng)站管理，市級(jí)用戶負(fù)責(zé)本地市范圍內(nèi)的網(wǎng)站管理。目前已成為安徽移動(dòng)日常網(wǎng)站管理中必不可少的工具。主要發(fā)揮以下作用：(1)有效打擊了未備案網(wǎng)站的私自接入，降低了問(wèn)題網(wǎng)站出現(xiàn)的可能。(2)準(zhǔn)確抓取了網(wǎng)內(nèi)不良信息。確保安徽移動(dòng)網(wǎng)站不違法國(guó)家相應(yīng)法律法規(guī)，確保安徽移動(dòng)互聯(lián)網(wǎng)健康發(fā)展。(3)在多次互聯(lián)網(wǎng)不良信息的專項(xiàng)行動(dòng)中發(fā)揮了積極作用，為中國(guó)移動(dòng)在互聯(lián)網(wǎng)管理方面樹立了領(lǐng)頭羊的正面形象。安徽移動(dòng)網(wǎng)站備案監(jiān)控系統(tǒng)的建設(shè)和成功應(yīng)用，解決了以往在網(wǎng)站備案管理以及網(wǎng)絡(luò)不良信息管理方面的問(wèn)題。尤其是在國(guó)家近年來(lái)越來(lái)越重視網(wǎng)絡(luò)信息控制的風(fēng)口浪尖下，對(duì)網(wǎng)絡(luò)信息的管理尤為重要，一旦出現(xiàn)負(fù)面信息，將造成輿論的強(qiáng)大壓力，可能對(duì)運(yùn)營(yíng)商造成重大損失。網(wǎng)站備案監(jiān)控系統(tǒng)的建成為安徽移動(dòng)互聯(lián)網(wǎng)健康發(fā)展有著重大意義。文章主體(3000字以上，可附在表格后)：根據(jù)成果研究類別，主體內(nèi)容的要求有差異,具體要求見表格后的“填寫說(shuō)明6”自動(dòng)、高效的網(wǎng)站備案監(jiān)控系統(tǒng)一、背景情況伴隨著互聯(lián)網(wǎng)的發(fā)展和普及，網(wǎng)絡(luò)上充斥著色情、暴力、反動(dòng)、迷信等各類不良信息，不但會(huì)對(duì)未成年人的身心發(fā)育和健康成長(zhǎng)十分有害，甚至?xí)绊懙絿?guó)家形象和尊嚴(yán)。因此，近年來(lái)國(guó)家不斷加強(qiáng)對(duì)互聯(lián)網(wǎng)信息安全的監(jiān)控力度，先后下發(fā)了國(guó)務(wù)院令第292號(hào)《互聯(lián)網(wǎng)信息服務(wù)管理辦法》和工信部令第33號(hào)《非經(jīng)營(yíng)性互聯(lián)網(wǎng)信息服務(wù)備案管理辦法》等相關(guān)規(guī)定，規(guī)定明確國(guó)家對(duì)經(jīng)營(yíng)性互聯(lián)網(wǎng)信息服務(wù)實(shí)行許可制度，對(duì)非經(jīng)營(yíng)性互聯(lián)網(wǎng)信息服務(wù)實(shí)行備案制度。未取得許可或者未履行備案手續(xù)的，不得從事互聯(lián)網(wǎng)信息服務(wù)，否則就屬于違法行為。隨著安徽移動(dòng)互聯(lián)網(wǎng)業(yè)務(wù)的發(fā)展和向服務(wù)型IDC轉(zhuǎn)型的不斷深入，越來(lái)越多的企業(yè)使用安徽移動(dòng)企業(yè)建站及主機(jī)托管業(yè)務(wù)將網(wǎng)站服務(wù)器托管在我公司IDC機(jī)房，未建設(shè)網(wǎng)站備案系統(tǒng)之前，不但對(duì)承載在我方機(jī)房的未備案網(wǎng)站很難發(fā)現(xiàn)，而且對(duì)網(wǎng)站中的不良信息業(yè)無(wú)從下手，為非法網(wǎng)站的運(yùn)營(yíng)提供了可乘之機(jī)。為落實(shí)國(guó)家、工信部和集團(tuán)公司對(duì)打擊未備案網(wǎng)站和網(wǎng)絡(luò)不良信息的要求，保證安徽移動(dòng)互聯(lián)網(wǎng)持續(xù)健康發(fā)展，于2010年3月安徽移動(dòng)建設(shè)了網(wǎng)站備案監(jiān)控系統(tǒng)，該系統(tǒng)能快速發(fā)現(xiàn)未備案網(wǎng)站，快速抓取網(wǎng)內(nèi)不良信息，有效提高了安徽移動(dòng)對(duì)省內(nèi)網(wǎng)站的信息安全和備案管理水平，保證了安徽移動(dòng)切實(shí)響應(yīng)國(guó)家相關(guān)法律法規(guī)要求，在電信行業(yè)中為公司樹立了互聯(lián)網(wǎng)健康發(fā)展領(lǐng)跑者的形象。二、業(yè)務(wù)現(xiàn)狀未建立網(wǎng)站備案監(jiān)控系統(tǒng)前，沒(méi)有技術(shù)手段對(duì)發(fā)布涉黃、反動(dòng)、非法傳銷等傳播非法信息的網(wǎng)站進(jìn)行快速定位，不能自動(dòng)發(fā)現(xiàn)我省網(wǎng)內(nèi)未備案網(wǎng)站及含有不良信息的網(wǎng)站，不能及時(shí)打擊網(wǎng)絡(luò)不良信息傳播等違法行為。因此，不能有效落實(shí)國(guó)務(wù)院令第292號(hào)《互聯(lián)網(wǎng)信息服務(wù)管理辦法》和工信部令第33號(hào)《非經(jīng)營(yíng)性互聯(lián)網(wǎng)信息服務(wù)備案管理辦法》的相關(guān)規(guī)定。經(jīng)調(diào)研江蘇、湖北、江西、上海等移動(dòng)公司均未建設(shè)網(wǎng)站備案監(jiān)控系統(tǒng)，均不能有效監(jiān)控和打擊網(wǎng)絡(luò)違法信息，不能有效落實(shí)國(guó)家的相關(guān)規(guī)定。三、 技術(shù)方案3.1概述針對(duì)上述情況，安徽移動(dòng)建設(shè)了網(wǎng)站備案監(jiān)控系統(tǒng)，該系統(tǒng)通過(guò)“DNS分析+HTTP分析+爬蟲分析”三種網(wǎng)站發(fā)現(xiàn)技術(shù)的組合，可高效、準(zhǔn)確發(fā)現(xiàn)省內(nèi)接入的絕大多數(shù)網(wǎng)站，尤其針對(duì)虛擬主機(jī)、私自接入等潛伏網(wǎng)站效果甚佳。然后解決“網(wǎng)站內(nèi)容是什么？”的問(wèn)題，即監(jiān)測(cè)網(wǎng)站是否含有不良信息等法律禁止內(nèi)容。系統(tǒng)通過(guò)搜索引擎的主動(dòng)監(jiān)控方式，快速搜索網(wǎng)內(nèi)是否含有不良信息，與以往的DPI包檢測(cè)技術(shù)相比，該方式無(wú)須高成本的硬件投入，且范圍覆蓋全省，不受用戶是否訪問(wèn)的限制，搜索引擎可主動(dòng)出擊，主動(dòng)發(fā)現(xiàn)網(wǎng)內(nèi)的不良信息。網(wǎng)站備案監(jiān)控系統(tǒng)在解決以上兩大主要問(wèn)題的同時(shí)，還輔以網(wǎng)站定位追蹤、網(wǎng)站狀態(tài)查詢等輔助功能，拓展了系統(tǒng)的實(shí)用性。3.2方案詳述如圖2-1為網(wǎng)站備案監(jiān)控系統(tǒng)的網(wǎng)絡(luò)拓?fù)浼軜?gòu)，從部署結(jié)構(gòu)看系統(tǒng)主要分為3部分，第一部分為最上方的省級(jí)中心，該處部署系統(tǒng)應(yīng)用服務(wù)器、內(nèi)容搜索服務(wù)器。系統(tǒng)應(yīng)用服務(wù)器提供web服務(wù)，內(nèi)容搜索服務(wù)器提供內(nèi)容監(jiān)控。第二部分為DNS分析方式發(fā)現(xiàn)網(wǎng)站。第三部分為HTTP分析發(fā)現(xiàn)網(wǎng)站。本系統(tǒng)的主要實(shí)現(xiàn)基礎(chǔ)是網(wǎng)站發(fā)現(xiàn)技術(shù)，而本系統(tǒng)采用的DNS分析+HTTP分析+爬蟲分析三種技術(shù)互不影響，三種技術(shù)可獨(dú)立運(yùn)行可有優(yōu)勢(shì)，其中DNS分析技術(shù)網(wǎng)站發(fā)現(xiàn)范圍覆蓋全省，可發(fā)現(xiàn)專線、虛擬主機(jī)等潛藏網(wǎng)站。HTTP分析技術(shù)針對(duì)IDC進(jìn)行網(wǎng)站發(fā)現(xiàn)，可高效發(fā)現(xiàn)IDC內(nèi)接入的所有網(wǎng)站。爬蟲分析技術(shù)較之DNS分析和HTTP分析效率雖然較低，但是是對(duì)以上兩種方式的一種補(bǔ)充，在發(fā)現(xiàn)絕大多數(shù)網(wǎng)站之后，一些無(wú)人訪問(wèn)的網(wǎng)站可通過(guò)爬蟲技術(shù)補(bǔ)充發(fā)現(xiàn)。三種技術(shù)互相補(bǔ)充、互不影響，同時(shí)使用可有效提高網(wǎng)站發(fā)現(xiàn)的效率。TH 務(wù)芒竅bME厳務(wù)專TH 務(wù)芒竅bME厳務(wù)專系統(tǒng)設(shè)備內(nèi)容擅束隔穹希京應(yīng)!U直舒器 ^、一*aM）圖2-1具體技術(shù)原理如下：3?2?1網(wǎng)站發(fā)現(xiàn)方式一：DNS分析DNS分析網(wǎng)站發(fā)現(xiàn)方式，是該系統(tǒng)中效率最高的網(wǎng)站發(fā)現(xiàn)方式，該方式通過(guò)實(shí)時(shí)分析DNS的響應(yīng)流量，發(fā)現(xiàn)省內(nèi)的絕大多數(shù)網(wǎng)站。省級(jí)DNS負(fù)責(zé)省內(nèi)用戶的域名解析請(qǐng)求的應(yīng)答，所以通過(guò)分析省級(jí)DNS的域名應(yīng)答流量可實(shí)時(shí)發(fā)現(xiàn)網(wǎng)內(nèi)接入的網(wǎng)站。因?yàn)榫W(wǎng)站無(wú)論是通過(guò)何種方式接入的如IDC托管主機(jī)、專線接入等，都需要進(jìn)行域名解析，所以只要有用戶通過(guò)本省移動(dòng)DNS訪問(wèn)了該網(wǎng)站則DNS可發(fā)現(xiàn)該網(wǎng)站。具體實(shí)現(xiàn)流程如下：（1） 在DNS的上聯(lián)交換機(jī)做端口鏡像，將DNS的響應(yīng)流量鏡像到一個(gè)網(wǎng)口（注：通過(guò)DNS的響應(yīng)流量很小，-般在幾十兆左右，所以一個(gè)千兆以太網(wǎng)口夠用）（2） 將DNS分析服務(wù)器連接至該鏡像網(wǎng)口（3） DNS分析服務(wù)器接收鏡像流量，并將域名的IP地址與安徽移動(dòng)的監(jiān)控地址段比較，記錄IP地址屬于安徽移動(dòng)地址范圍的域名，該類域名即為安徽移動(dòng)接入的網(wǎng)站。（注：可排除DNS的默認(rèn)指向地址）如圖2-2為DNS分析的網(wǎng)站發(fā)現(xiàn)示意圖。CMNET虛擬卞機(jī)、專線接入、內(nèi)網(wǎng)站等網(wǎng)站發(fā)現(xiàn)*UCMNET虛擬卞機(jī)、專線接入、內(nèi)網(wǎng)站等網(wǎng)站發(fā)現(xiàn)*U析服勞蠱圖2-23?2?2網(wǎng)站發(fā)現(xiàn)方式二：HTTP分析HTTP分析技術(shù)，是專門針對(duì)IDC內(nèi)接入網(wǎng)站進(jìn)行發(fā)現(xiàn)的一種手段，該技術(shù)科可有效發(fā)現(xiàn)IDC內(nèi)虛擬主機(jī)等潛藏網(wǎng)站，該方式與DNS分析方式的區(qū)別是不受訪問(wèn)者所使用的DNS的限制，無(wú)論訪問(wèn)者在哪里，只要有進(jìn)入IDC內(nèi)的網(wǎng)站訪問(wèn)請(qǐng)求即可發(fā)現(xiàn)該網(wǎng)站。與以往的DPI包技術(shù)相比優(yōu)勢(shì)如下：（2） 該技術(shù)只分析80端口的HTTP請(qǐng)求，只分析請(qǐng)求包頭幾百字節(jié)的信息量，對(duì)設(shè)備要求性能不高，成本低。（3） 部署方便，無(wú)需改變?cè)芯W(wǎng)絡(luò)結(jié)構(gòu)，只需做端口鏡像即可。具體實(shí)現(xiàn)流程如下：（1） 在IDC核心交換機(jī)處做端口鏡像，將流入IDC的80端口流量鏡像到一個(gè)千兆電口（注：通常IDC的出口流量很大，但實(shí)際上大部分流量都是出向的，流入IDC的HTTP請(qǐng)求流量很小，所以一個(gè)千兆口完全滿足使用）（2） 將該鏡像口連接一臺(tái)HTTP分析服務(wù)器（3） HTTP分析服務(wù)器實(shí)時(shí)分析流入IDC的HTTP請(qǐng)求，將域名對(duì)應(yīng)的IP地址與安徽移動(dòng)的監(jiān)控地址段進(jìn)行比對(duì)，記錄屬于監(jiān)控范圍的網(wǎng)站，亥類網(wǎng)站即為IDC內(nèi)接入的網(wǎng)站。注：通常IDC只有2個(gè)核心交換機(jī)，所以一個(gè)ICD一般投入一臺(tái)PC服務(wù)器配置兩塊網(wǎng)卡，即可監(jiān)控整個(gè)IDC。如圖2-3為HTTP分析網(wǎng)站發(fā)現(xiàn)的示意圖。

圖2-33.2.3網(wǎng)站發(fā)現(xiàn)方式三：爬蟲分析網(wǎng)站發(fā)現(xiàn)爬蟲分析網(wǎng)站發(fā)現(xiàn)不是系統(tǒng)網(wǎng)站發(fā)現(xiàn)的主要手段僅只是對(duì)DNS分析和HTTP分析的補(bǔ)充，效率較前兩種方式較低。如圖2-4所示。?生謹(jǐn)TH』.托吸時(shí)表狐取列衷■O抓収頁(yè)面5＞膽觸抽削的！?生謹(jǐn)TH』.托吸時(shí)表狐取列衷■O抓収頁(yè)面5＞膽觸抽削的！HI,坦靳散期庫(kù)[ntemelJJ締折忸搖-井梓城桝時(shí)櫬柑哎現(xiàn)的網(wǎng)殆搟析瓷的內(nèi)需抓取蟲的內(nèi)容圖2-43.2.4內(nèi)容搜索引擎系統(tǒng)在發(fā)現(xiàn)網(wǎng)站之后，要對(duì)網(wǎng)站內(nèi)容進(jìn)行監(jiān)控，分析是否含有色情、反動(dòng)等不良信息。網(wǎng)站備案監(jiān)控系統(tǒng)采用類似百度、谷歌的搜索引擎，主動(dòng)對(duì)網(wǎng)站進(jìn)行內(nèi)容分析，快速發(fā)現(xiàn)非法關(guān)鍵詞。與以往的DPI深度包檢測(cè)技術(shù)相比有如下優(yōu)勢(shì)：（1） 無(wú)需專用硬件，成本低；（2） 不受地理位置限制，無(wú)需在特定位置通過(guò)分光、分析流量，只要能上網(wǎng)就可以對(duì)網(wǎng)站進(jìn)行內(nèi)容撥測(cè)；（3） 不受訪問(wèn)者的限制，無(wú)論網(wǎng)站是否被訪問(wèn)，搜索引擎本身就是一個(gè)網(wǎng)站訪問(wèn)者，主動(dòng)出擊，主動(dòng)撥測(cè)，撥測(cè)時(shí)間、撥測(cè)頻率靈活定義；（4） 主動(dòng)搜索可遍歷網(wǎng)站的每個(gè)頁(yè)面，不留死角爬蟲的邏輯處理流程如下圖2-5：A「規(guī)則配置）『A「規(guī)則配置）『監(jiān)拄處埠] （轎單管理;Internet?后臺(tái)引擎圖2-5（1） 規(guī)則配置，用戶自定義搜索的關(guān)鍵詞分類，如色情、非法銷售等，在分類下創(chuàng)建具體的非法關(guān)鍵詞。為每一類監(jiān)控分類設(shè)置快照閥值。（2） 監(jiān)控處理，搜索引擎抓取網(wǎng)站頁(yè)面內(nèi)容，并自動(dòng)進(jìn)行內(nèi)容解析，關(guān)鍵詞比對(duì)。對(duì)含有非法關(guān)鍵詞超過(guò)閥值的頁(yè)面做快照處理。（3） 名單管理，用戶設(shè)定黑名單閥值，系統(tǒng)將自動(dòng)對(duì)含有非法頁(yè)面達(dá)到閥值的網(wǎng)站，將其列入黑名單。黑名單可作為用戶管理的重點(diǎn)照顧對(duì)象。搜索引擎中還用到以下關(guān)鍵技術(shù)，用以提高搜索的準(zhǔn)確度：（1） 權(quán)重系統(tǒng)預(yù)置關(guān)鍵詞庫(kù)，作為搜索引擎搜索的關(guān)鍵詞，關(guān)鍵詞庫(kù)可靈活定義詞組分類，如色情、反動(dòng)、非法銷售等。權(quán)重是反映一個(gè)詞的敏感程度的標(biāo)準(zhǔn)，該技術(shù)可有效提高搜索引擎的搜索準(zhǔn)確度。（2） 分詞技術(shù)分詞技術(shù)，是搜索引擎中用到的關(guān)鍵技術(shù)，該技術(shù)可將抓取內(nèi)容自動(dòng)進(jìn)行分詞，如中華人民共和國(guó)，可分為中華人民共和國(guó)，然后系統(tǒng)將這些分析于關(guān)鍵詞進(jìn)行比對(duì)。該技術(shù)是搜索引擎中必不可缺的技術(shù)之一。（3） 加權(quán)算法搜索引擎在判斷一個(gè)網(wǎng)頁(yè)是否被抓取的過(guò)程中，不僅判斷頁(yè)面含有非法關(guān)鍵詞的數(shù)量。同時(shí)還判斷該詞在所在頁(yè)面中出現(xiàn)的位置，如關(guān)鍵詞出現(xiàn)在標(biāo)題處則權(quán)重增加。搜索引擎將綜合以上因素判斷頁(yè)面是否被抓取。（4） 搜索引擎動(dòng)態(tài)展示技術(shù)網(wǎng)站備案監(jiān)控系統(tǒng)將搜索引擎的每個(gè)線程，直觀呈現(xiàn)在用戶面前，實(shí)現(xiàn)了可視化的搜索過(guò)程，系統(tǒng)頁(yè)面上動(dòng)態(tài)顯示搜索引擎每個(gè)線程，當(dāng)前搜索的URL，搜索的網(wǎng)頁(yè)總數(shù)等信息，是搜索過(guò)程一幕了然，確保了搜索的高效運(yùn)行。使用效果安徽移動(dòng)網(wǎng)站備案監(jiān)控系統(tǒng)建設(shè)和使用有效解決了未備案網(wǎng)站存在的無(wú)法快速定位、無(wú)法主動(dòng)監(jiān)控及查看爬蟲工作狀態(tài)等問(wèn)題，具體內(nèi)容如下：（1） 解決了以往無(wú)法快速發(fā)現(xiàn)未備案網(wǎng)站問(wèn)題以往對(duì)虛擬主機(jī)，專線接入等私自接入的網(wǎng)站，沒(méi)有有效的發(fā)現(xiàn)機(jī)制，只能通過(guò)在省出口或者IDC出口設(shè)置流量分析系統(tǒng)進(jìn)行監(jiān)測(cè)，該方式中流量分析設(shè)備一般都是專用硬件設(shè)備，價(jià)格昂貴，成本巨大。同時(shí)由于流量分析設(shè)備只能分析分光處得流量，對(duì)沒(méi)有分光的地方不能發(fā)現(xiàn)流量?jī)?nèi)的網(wǎng)站，因此需要對(duì)現(xiàn)網(wǎng)改造，在現(xiàn)有所有電路上部署分光設(shè)備，操作復(fù)雜且有一定安全隱患。而本系統(tǒng)采用DNS分析+HTTP分析+爬蟲分析的組合方式，每種技術(shù)都無(wú)需高額投入，更不用分光，部署方便，且解決了以往無(wú)法解決的問(wèn)題。（2） 解決了無(wú)法主動(dòng)監(jiān)測(cè)網(wǎng)站內(nèi)容的問(wèn)題網(wǎng)站內(nèi)容需要即時(shí)的撥測(cè)，才能保證在第一時(shí)間內(nèi)發(fā)現(xiàn)問(wèn)題解決問(wèn)題。而以往采用的包檢測(cè)技術(shù)，只能被動(dòng)的等待流量過(guò)來(lái)才能分析，也就是說(shuō)需要有人訪問(wèn)了內(nèi)容，而且必須從該出口走才能監(jiān)測(cè)到，不能即時(shí)發(fā)現(xiàn)問(wèn)題。而采用內(nèi)容搜索引擎技術(shù)主動(dòng)出擊，不僅效率高，一臺(tái)搜索服務(wù)器一天就可以完成對(duì)百萬(wàn)級(jí)頁(yè)面的內(nèi)容檢查。而且無(wú)需大量的硬件投入只需基本的PC服務(wù)器即可，部署也十分方便，只要能上網(wǎng)具備一定的帶寬即可。（3） 解決了無(wú)法直觀了解搜索引擎工作狀態(tài)的問(wèn)題搜索引擎的工作過(guò)程是后臺(tái)實(shí)現(xiàn)的，所以無(wú)法直觀了解搜索引擎的工作狀態(tài)，而一旦搜索引擎出現(xiàn)故障則無(wú)法保證搜索的效率，網(wǎng)站備案監(jiān)控系統(tǒng)，特有的搜索引擎動(dòng)態(tài)搜索過(guò)程展示功能，將搜索引擎實(shí)現(xiàn)了可視化的動(dòng)態(tài)搜索，類似殺毒軟件，搜索引擎可動(dòng)態(tài)呈現(xiàn)當(dāng)先搜索的URL，及每個(gè)搜索線程的工作狀態(tài)，確保搜索引擎保持高效率的工作狀態(tài)。五、本省推廣情況安徽移動(dòng)網(wǎng)站備案監(jiān)控系統(tǒng)投資總額19.5萬(wàn)元，較之傳統(tǒng)流量監(jiān)控發(fā)現(xiàn)方式共節(jié)約投資約180萬(wàn)元。目前監(jiān)控范圍覆蓋IDC及全省接入用戶，已成為安徽移動(dòng)日常網(wǎng)站管理中必不可少的工具，每月可完成對(duì)全省4.2萬(wàn)個(gè)IP地址的掃描。截至2011年7月共發(fā)現(xiàn)處理未備案網(wǎng)站5個(gè)，抓取含有色情等不良信息的非法網(wǎng)站2個(gè)，有力的打擊了未備案網(wǎng)站和含有不良信息的網(wǎng)站。其主要作用如下：（1） 有效打擊了未備案網(wǎng)站的私自接入，降低了問(wèn)題網(wǎng)站出現(xiàn)的可能。（2） 準(zhǔn)確抓取了網(wǎng)內(nèi)不良信息。確保安徽移動(dòng)網(wǎng)站不違法國(guó)家相應(yīng)法律法規(guī)，確保安徽移動(dòng)互聯(lián)網(wǎng)健康發(fā)展。（3） 在多次互聯(lián)網(wǎng)不良信息的專項(xiàng)行動(dòng)中發(fā)揮了積極作用，為中國(guó)移動(dòng)在互聯(lián)網(wǎng)管理方面樹立了領(lǐng)頭羊的正面形象。該系統(tǒng)的建設(shè)和成功使用，極大地提高了網(wǎng)站備案和網(wǎng)頁(yè)內(nèi)容監(jiān)控的自動(dòng)化、智能化、精確化，創(chuàng)