大數(shù)據(jù)環(huán)境下面向電信行業(yè)數(shù)據(jù)管理平臺的設(shè)計與實現(xiàn).pdf

1、互聯(lián)網(wǎng)的發(fā)展給傳統(tǒng)企業(yè)的發(fā)展帶來了沖擊，不僅包括傳統(tǒng)實體店線下銷售的模式被電商沖擊，還包括虛擬運(yùn)營商對傳統(tǒng)運(yùn)營商的沖擊，傳統(tǒng)電信運(yùn)營商需要順應(yīng)時代趨勢做出相應(yīng)轉(zhuǎn)型。電信運(yùn)營商必須面對如何處理海量數(shù)據(jù)的問題，以及如何提高運(yùn)營效率來滿足用戶日益?zhèn)€性化的需求。本文嘗試設(shè)計了一套面向電信行業(yè)的數(shù)據(jù)管理平臺來簡化對海量碎片化的數(shù)據(jù)處理工作，幫助運(yùn)營人員制定精準(zhǔn)營銷方案來提高運(yùn)營效率。
　　在熟悉了數(shù)據(jù)挖掘相關(guān)理論知識及技術(shù)、分析了電信行業(yè)業(yè)

2、務(wù)發(fā)展方向及數(shù)據(jù)特點、掌握了Web應(yīng)用平臺開發(fā)及數(shù)據(jù)存儲等相關(guān)技術(shù)的基礎(chǔ)上，本文做了以下工作：
　　第一、利用Node.js開發(fā)技術(shù)，設(shè)計并實現(xiàn)了一套Web應(yīng)用數(shù)據(jù)管理平臺來展現(xiàn)對電信數(shù)據(jù)進(jìn)行有效挖掘的直觀結(jié)果，并嘗試通過友好的交互體驗來降低進(jìn)行電信數(shù)據(jù)挖掘相關(guān)工作的技術(shù)門檻。
　　第二、根據(jù)對電信運(yùn)營商的用戶數(shù)據(jù)、產(chǎn)品數(shù)據(jù)及歷史營銷數(shù)據(jù)的類型及特點的了解，制定了一套適用于電信運(yùn)營商的數(shù)據(jù)流量業(yè)務(wù)的數(shù)據(jù)分析方案，并且構(gòu)建了基

3、于數(shù)據(jù)流量產(chǎn)品的用戶細(xì)分模型。
　　第三、針對數(shù)據(jù)存儲，構(gòu)建了Hadoop分布式存儲系統(tǒng)的集群環(huán)境，利用分布式文件系統(tǒng)HDFS完成數(shù)據(jù)存儲，通過分布式數(shù)據(jù)倉庫Hive實現(xiàn)使用HQL進(jìn)行查詢分析。
　　第四、針對數(shù)據(jù)的分析處理，利用R語言服務(wù)器程序Rserve操作Hive表中數(shù)據(jù)執(zhí)行相關(guān)分析挖掘算法，并將結(jié)果通過RIO庫傳遞到Web前端。
　　利用支持實時雙向連接的Web應(yīng)用技術(shù)Node.js來建站，將Rserve做海量