然后將這些IP地址作為輸入，與NetFlow數(shù)據(jù)進(jìn)行迭代 分析。如圖2所示，可得到用戶訪問(wèn)百度網(wǎng)站的流量曲線。 將輸出的NetFlow數(shù)據(jù)作為輸入

，

與BGP進(jìn)行二次迭代 分析，可得到百度網(wǎng)站流量在各運(yùn)營(yíng)商及具體歸屬落地的明 細(xì)統(tǒng)計(jì)。 通過(guò)多次數(shù)據(jù)迭代的深度數(shù)據(jù)分析，可以發(fā)現(xiàn)河南聯(lián)通 用戶訪問(wèn)某個(gè)網(wǎng)站的流量落地分布，從而找到需要引入本地 CDN業(yè)務(wù)的網(wǎng)站資源。以前新到電銷(xiāo)卡電銷(xiāo)卡,新到電銷(xiāo)卡不封號(hào)電銷(xiāo)卡,新到電銷(xiāo)卡防封電銷(xiāo)卡這些分析只能通過(guò)端口鏡像或 分光的方式才能獲得。 2.4 建設(shè)方案 2.4.1 大數(shù)據(jù)分析系統(tǒng) 本期工程在鄭州聯(lián)通和洛陽(yáng)聯(lián)通部署大數(shù)據(jù)分析系統(tǒng) 服務(wù)器，每個(gè)節(jié)點(diǎn)9臺(tái)服務(wù)器，通過(guò)千兆上聯(lián)到本地匯聚交 換機(jī)并收集系統(tǒng)兩地DNS日志，另外根據(jù)區(qū)域?qū)⒕W(wǎng)絡(luò)設(shè)備的 NetFlow信息以3000:1的采樣比就近發(fā)送到兩個(gè)數(shù)據(jù)核心機(jī)房。 2.4.2 系統(tǒng)構(gòu)成 基于BGP路由表、DNS和NetFlow的數(shù)據(jù)分析系統(tǒng)由數(shù) 據(jù)采集、數(shù)據(jù)分析、數(shù)據(jù)匯總展示三大部分構(gòu)成。 (1)數(shù)據(jù)采集分為三部分。一部分NetFlow流數(shù)據(jù)采 集，網(wǎng)絡(luò)設(shè)備主動(dòng)以3000:1的采樣比將Flow流數(shù)據(jù)發(fā)送到 Ne新到電銷(xiāo)卡電銷(xiāo)卡,新到電銷(xiāo)卡不封號(hào)電銷(xiāo)卡,新到電銷(xiāo)卡防封電銷(xiāo)卡tFlow流數(shù)據(jù)采集服務(wù)器；第二部分DNS日志采集，通過(guò)在 FTP方式，DNS系統(tǒng)將雙向DNS日志信息發(fā)送到DNS日志采 集服務(wù)器；第三部分BGP路由表，通過(guò)與河南聯(lián)通城域網(wǎng)RR 路由建立BGP鄰居，收取BGP路由器，生成明細(xì)路由數(shù)據(jù)。 (2)數(shù)據(jù)分析，基于Hadoop大數(shù)據(jù)分析架構(gòu)，結(jié)合分布式 文件系統(tǒng)和分布式計(jì)算的優(yōu)勢(shì)，對(duì)海量日志進(jìn)行數(shù)據(jù)分析。 (3)數(shù)據(jù)匯總展示，通過(guò)將BGP路由表、DNS日志和 NetFlow流數(shù)據(jù)混合計(jì)算，再經(jīng)多次數(shù)據(jù)迭代分析出用戶流 量流向數(shù)據(jù)，并通過(guò)B/S架構(gòu)展示給管理員，方便用戶了解 網(wǎng)絡(luò)的工作情況和網(wǎng)絡(luò)中用戶正常和異常的行為。