基于網(wǎng)絡(luò)數(shù)據(jù)流的用戶身份近似關(guān)聯(lián).pdf

1、隨著網(wǎng)絡(luò)的快速發(fā)展，網(wǎng)絡(luò)數(shù)據(jù)呈指數(shù)級(jí)增加，其包含了豐富的用戶信息，如何從海量數(shù)據(jù)中提取有價(jià)值的信息成為大數(shù)據(jù)研究的熱點(diǎn)，引起了各個(gè)行業(yè)的廣泛關(guān)注。本文以海量網(wǎng)絡(luò)數(shù)據(jù)流為研究對(duì)象，通過(guò)對(duì)其進(jìn)行處理和分析，得到穩(wěn)定的用戶網(wǎng)絡(luò)行為模式并據(jù)此對(duì)用戶身份進(jìn)行近似關(guān)聯(lián)和群劃分。本文首先并針對(duì)應(yīng)用層的DDOS攻擊，提出基于主/輔mass函數(shù)D-S證據(jù)理論的二次清洗算法實(shí)現(xiàn)數(shù)據(jù)預(yù)處理；接著在數(shù)據(jù)處理過(guò)程中，提出了用戶網(wǎng)絡(luò)指紋的概念并設(shè)計(jì)了金字塔狀網(wǎng)絡(luò)指

2、紋更新框架，不定期的對(duì)用戶網(wǎng)絡(luò)指紋進(jìn)行聚類處理，形成隨時(shí)間進(jìn)化的穩(wěn)定的用戶網(wǎng)絡(luò)指紋，實(shí)現(xiàn)用戶身份關(guān)聯(lián)并標(biāo)示其唯一性；由于用戶訪問(wèn)網(wǎng)頁(yè)熱度值是構(gòu)成用戶網(wǎng)絡(luò)指紋的重要組成部分，本文選擇采用兩種網(wǎng)頁(yè)分類方式參與計(jì)算用戶訪問(wèn)熱度值，分別為基于數(shù)據(jù)庫(kù)匹配的網(wǎng)頁(yè)分類和基于樸素貝葉斯算法的網(wǎng)頁(yè)分類。首先采用前者，但待匹配的用戶訪問(wèn)的網(wǎng)頁(yè)在數(shù)據(jù)庫(kù)分類匹配不成功的情況下將采用第二種分類算法進(jìn)行處理，降低了系統(tǒng)的時(shí)間復(fù)雜度；對(duì)于網(wǎng)絡(luò)用戶群劃分問(wèn)題，提出了基