大數據專(zhuān)欄

大數據應用是新東網(wǎng)現階段及未來(lái)專(zhuān)注開(kāi)發(fā)的重要業(yè)務(wù)領(lǐng)域，涉及渠道大數據，城市大數據、農業(yè)大數據、溯源大數據、輿情大數據、安全大數據等。2018年，新東網(wǎng)將建成大數據云平臺（DOONE CLOUD INSIGHT），實(shí)現支持數據超市，提供數據公共服務(wù)能力及提供專(zhuān)題方式的圖像化配置數據計算能力，支持接入政府云、阿里云和騰訊云服務(wù)能力。“大數據專(zhuān)欄”將陸續推出系列文章，每周三發(fā)布。

 

 

通信行業(yè)大數據應用背景

 

 

近幾年來(lái)，隨著(zhù)計算機和信息技術(shù)的迅猛發(fā)展和普及應用，行業(yè)應用系統的規模迅速擴大，行業(yè)應用所產(chǎn)生的數據呈爆炸性增長(cháng)。 動(dòng)輒達到數百TB甚至數十至數百PB規模的行業(yè)/企業(yè)大數據已遠遠超出了現有傳統的計算技術(shù)和信息系統的處理能力，因此，尋求有效的大數據處理技術(shù)、方法和手段已經(jīng)成為現實(shí)世界的迫切需求。在國家層面上,我國在"十三五"規劃（2016－2020）中提出："實(shí)施國家大數據戰略，推進(jìn)數據資源開(kāi)放共享"。作為"'十三五'十四大戰略"之一的"國家大數據戰略"，我國《大數據產(chǎn)業(yè)"十三五"發(fā)展規劃》也正在緊張制定中。"十三五"期間，大數據領(lǐng)域必將迎來(lái)建設高峰和投資良機。

 

在市場(chǎng)競爭日益激烈的大背景下，通信企業(yè)一方面考慮是否需要投入營(yíng)銷(xiāo)成本來(lái)占據更多市場(chǎng)份額；另一方面針對營(yíng)銷(xiāo)成本投入后營(yíng)銷(xiāo)效果如何、營(yíng)銷(xiāo)過(guò)程數據如何、如何為一線(xiàn)提供行之有效的營(yíng)銷(xiāo)策略、營(yíng)銷(xiāo)數據及營(yíng)銷(xiāo)工具，成為公司領(lǐng)導及管理層的切身痛點(diǎn)。

 

 

渠道大數據平臺是什么

 

 

渠道大數據平臺基于大數據挖掘技術(shù)，結合行業(yè)海量數據處理，通過(guò)面向各級承包經(jīng)營(yíng)者小CEO，以客戶(hù)為中心，建立以“劃小、經(jīng)營(yíng)、承包”三位一體的統一平臺，為承包者及企業(yè)的生產(chǎn)經(jīng)營(yíng)提供有效的解決方案。

 

l 劃小管理

 

引入“阿米巴”經(jīng)營(yíng)模式對企業(yè)經(jīng)營(yíng)單元進(jìn)行劃小管理。企業(yè)通過(guò)自下而上的倒三角管理模式實(shí)現量收成本、預算考核快速分配下達，再通過(guò)自上而下的經(jīng)營(yíng)發(fā)展來(lái)實(shí)現企業(yè)與小CEO雙贏(yíng)的格局。

 

l 承包管理

 

以網(wǎng)格為單位，開(kāi)展以客戶(hù)為中心的精準營(yíng)銷(xiāo)模式，實(shí)現網(wǎng)格化劃小承包責任機制，由小CEO管控各自承包責任田的成本預算及利潤。從而激發(fā)小CEO的營(yíng)銷(xiāo)動(dòng)力，多發(fā)展多收益。

 

l 經(jīng)營(yíng)分析

 

以大數據分析技術(shù)作為導向，建立多樣的經(jīng)營(yíng)分析模式：量收分析、發(fā)展分析、欠費分析、離網(wǎng)分析、商機發(fā)現等。通過(guò)大數據分析技術(shù)，分析用戶(hù)消費行為，針對不同潛在欠費、離網(wǎng)用戶(hù)及不同的業(yè)務(wù)場(chǎng)景，快速建立一套精準的營(yíng)維體系。

 

渠道大數據平臺整體解決方案

 

 

l 平臺采用技術(shù)架構

 

 

Hadoop是一個(gè)能夠對大量數據進(jìn)行分布式處理的軟件框架。 Hadoop 以一種可靠、高效、可伸縮的方式進(jìn)行數據處理。Hadoop 是可靠的，因為它假設計算元素和存儲會(huì )失敗，因此它維護多個(gè)工作數據副本，確保能夠針對失敗的節點(diǎn)重新分布處理。Hadoop 是高效的，因為它以并行的方式工作，通過(guò)并行處理加快處理速度。

 

Hadoop 由許多元素構成。其最底部是 Hadoop Distributed File System（HDFS），它存儲 Hadoop 集群中所有存儲節點(diǎn)上的文件。HDFS（對于本文）的上一層是MapReduce 引擎，該引擎由 JobTrackers 和 TaskTrackers 組成。

 

l 平臺數據邏輯架構

 

平臺數據整體邏輯分層主要分為五層架構管理，包括有數據集成層、文件存儲層、數據存儲層、編程模型層以及數據分析層。來(lái)實(shí)現劃小平臺數據流的邏輯分層。實(shí)現安全、可靠、高效的數據架構工作流。

 

l 平臺數據挖掘方案

 

 

 

如上圖所示，平臺數據挖掘核心思路分如下幾大步驟：

 

1） 數據采集與預處理：數據采集是通過(guò)RFID射頻技術(shù)、傳感器以及移動(dòng)互聯(lián)網(wǎng)等方式獲得的各種類(lèi)型的結構化及非結構化的海量數據，并完成對已接收數據的辨析、抽取、清洗等操作

 

2） 數據存儲與管理：大數據存儲與管理技術(shù)是用存儲器把采集到的數據存儲起來(lái)，建立相應的數據庫，并進(jìn)行管理和調用。主要解決大數據可存儲、可處理及有效傳輸等關(guān)鍵問(wèn)題。

 

3） 數據分析與挖掘：數據分析及挖掘技術(shù)是大數據的核心技術(shù)。主要是在現有的數據上進(jìn)行基于各種算法的計算，從而起到預測的效果，從而實(shí)現一些高級別數據分析的需求。

 

4）數據展現與應用 ：大數據技術(shù)能夠將隱藏于海量數據中的信息挖掘出來(lái)，從而提高各個(gè)領(lǐng)域的運行效率。

 

l新東網(wǎng)“渠道大數據平臺”能做什么?

 

用于以下三大領(lǐng)域：商業(yè)智能、政府決策、公共服務(wù)。

 

 

1、 市場(chǎng)化承包機制

 

建立完善的承包管理機制，將企業(yè)經(jīng)營(yíng)單元劃小為一個(gè)小顆粒度的網(wǎng)格，進(jìn)行有效的經(jīng)營(yíng)管理模式。企業(yè)通過(guò)至上而下的管理方式實(shí)現企業(yè)預算、營(yíng)業(yè)目標快速分配下達，再通過(guò)至下而上的發(fā)展來(lái)實(shí)現企業(yè)與個(gè)人經(jīng)營(yíng)者雙贏(yíng)的格局，從而激發(fā)企業(yè)營(yíng)銷(xiāo)活力，推動(dòng)企業(yè)業(yè)務(wù)發(fā)展；

 

2、 經(jīng)營(yíng)統計分析

 

實(shí)現多維度的運營(yíng)分析功能，為各級管理層和經(jīng)營(yíng)分析人員提供信息支撐，直觀(guān)反映企業(yè)的市場(chǎng)運營(yíng)狀況；

 

3、 業(yè)務(wù)營(yíng)銷(xiāo)支撐

 

打造前端營(yíng)銷(xiāo)一體化工作平臺，為前端業(yè)務(wù)部門(mén)提供針對性營(yíng)銷(xiāo)工作、精細化的營(yíng)銷(xiāo)管理工作和全渠道視圖化管理，提高市場(chǎng)渠道營(yíng)銷(xiāo)能力；

 

4、 企業(yè)的“工資條”

 

規范統一的薪酬管理模式，企業(yè)的“工資條”，為一線(xiàn)人員提供查看績(jì)效工資的入口，實(shí)時(shí)了解自身的薪酬；

 

5、 企業(yè)溝通交流

 

打造全網(wǎng)渠道管理交流平臺，實(shí)現運營(yíng)數據采集和指標配置及統一下發(fā)，為各級管理人員提供溝通保障；

 

6、 人力管理機制

 

建立不同責任渠道的組織架構，并根據“分渠道、分層級、分角色”管理模式進(jìn)行人員工號權限的限制，實(shí)現經(jīng)營(yíng)單元精確化管理。