一個初審復(fù)審協(xié)作式反垃圾郵件系統(tǒng)

一個初審/復(fù)審協(xié)作式反垃圾郵件系統(tǒng)作者單位：東北大學(xué)網(wǎng)絡(luò)中心作者：王興偉張登科溫占考易秀雙報告者：張登科模型建立反垃圾郵件系統(tǒng)三層模型

層1：負(fù)責(zé)垃圾郵件的過濾工作層2：負(fù)責(zé)垃圾郵件的整理工作層3：負(fù)責(zé)垃圾郵件的處理響應(yīng)工作系統(tǒng)架構(gòu)“初審/復(fù)審”協(xié)作式垃圾郵件系統(tǒng)架構(gòu)原型系統(tǒng)結(jié)構(gòu)原型系統(tǒng)實現(xiàn)基于如下目標(biāo)初審快速復(fù)審精確支持學(xué)習(xí)反饋原型系統(tǒng)包括主控機郵件網(wǎng)關(guān)服務(wù)器原型系統(tǒng)實現(xiàn)通用模塊子系統(tǒng)郵件入庫子系統(tǒng)特征發(fā)現(xiàn)子系統(tǒng)郵件初審子系統(tǒng)郵件復(fù)審子系統(tǒng)協(xié)同監(jiān)控Agent子系統(tǒng)主流群發(fā)工具特征庫建立子系統(tǒng)測試環(huán)境子系統(tǒng)主要子系統(tǒng)原型系統(tǒng)實現(xiàn)特征發(fā)現(xiàn)子系統(tǒng)由樣本庫消重、樣本讀取、Ngram統(tǒng)計、Ngram過濾、特征選擇等組成處理流程調(diào)用消重模塊對樣本庫中的垃圾郵件進行消重處理調(diào)用正語料準(zhǔn)備模塊更新正語料（垃圾郵件）

調(diào)用負(fù)語料準(zhǔn)備模塊更新負(fù)語料（正常郵件）原型系統(tǒng)實現(xiàn)特征發(fā)現(xiàn)子系統(tǒng)示意圖原型系統(tǒng)實現(xiàn)郵件復(fù)審分層過濾“疑似”垃圾郵件：快速／二級內(nèi)容過濾建立與更新垃圾郵件特征庫和規(guī)則庫特征匹配分類器判定原型系統(tǒng)實現(xiàn)郵件復(fù)審分類器

最大熵模型具有融合不同層次特征的能力Boosting學(xué)習(xí)框架與最大熵模型相結(jié)合來弱化“訓(xùn)練語料和測試語料服從相同分布”的假設(shè)，因為在實際應(yīng)用中，相對于需要測試的郵件，訓(xùn)練語料總是不充分的取得了優(yōu)于貝葉斯分類器的性能實現(xiàn)環(huán)境網(wǎng)絡(luò)拓?fù)湫阅茉u價及結(jié)論1、漏報率和誤報率定義垃圾郵件判定表(單位：封)定義為實際的垃圾郵件數(shù)目；定義為實際的合法郵件數(shù)目；定義反垃圾郵件系統(tǒng)的漏判率MR和誤判率FR分別為性能評價及結(jié)論測試名稱郵件總量初審(MR:FR)復(fù)審(MR:FR)整系統(tǒng)EvalI55195.65%:0%26:64%：4.26%2.39%：0.21%EvalII55473.87%:0%20.62%：0.98%1.17%：0.19%EvalIII70972.33%:0.23%30.43%:5.08%1.16%:0.58%EvalIV81784.81%:0%17.59%:4.35%3.61%:0.25