近年來(lái)，大數(shù)據(jù)所帶來(lái)的挑戰(zhàn)推動(dòng)了計(jì)算技術(shù)的快速發(fā)展，催生了分布式并行處理平臺(tái)Hadoop、軟硬件一體化數(shù)據(jù)庫(kù)服務(wù)器Exadata等一批新產(chǎn)品。對(duì)于電信運(yùn)營(yíng)商這樣的大型企業(yè)而言，需要思考如何應(yīng)用這些新技術(shù)，解決在大數(shù)據(jù)時(shí)代背景下所面臨的挑戰(zhàn)，從而提升企業(yè)價(jià)值。

    數(shù)據(jù)處理面臨5個(gè)挑戰(zhàn)

    當(dāng)前，電信運(yùn)營(yíng)商通過(guò)多年的信息化建設(shè)，已建成各種各樣的業(yè)務(wù)系統(tǒng)和IT支撐系統(tǒng)，而隨著業(yè)務(wù)規(guī)模、用戶(hù)需求的不斷提升以及移動(dòng)互聯(lián)網(wǎng)應(yīng)用的快速發(fā)展，在數(shù)據(jù)處理上正面臨著各種挑戰(zhàn)。其存在的問(wèn)題主要包括5個(gè)層面。

    一是需要處理的數(shù)據(jù)量日益龐大，難以實(shí)現(xiàn)海量數(shù)據(jù)的高效存儲(chǔ)和訪問(wèn)。電信運(yùn)營(yíng)商僅一個(gè)省公司一個(gè)月的計(jì)費(fèi)清單量就多達(dá)數(shù)十億條記錄，使用傳統(tǒng)的數(shù)據(jù)處理方法效率往往低下乃至不可忍受。而運(yùn)營(yíng)數(shù)據(jù)的日?qǐng)?bào)、月報(bào)和實(shí)時(shí)營(yíng)銷(xiāo)等需求，更是令統(tǒng)計(jì)、分析、挖掘、營(yíng)銷(xiāo)等系統(tǒng)不堪重負(fù)。

    二是無(wú)法應(yīng)對(duì)高并發(fā)讀寫(xiě)的需求。當(dāng)前的業(yè)務(wù)環(huán)境中，一些營(yíng)銷(xiāo)優(yōu)惠活動(dòng)，例如網(wǎng)廳的秒殺活動(dòng)、iPhone首發(fā)優(yōu)惠辦理等，容易引發(fā)一些難以預(yù)估的短時(shí)間內(nèi)極端高并發(fā)讀寫(xiě)需求，并往往達(dá)到每秒上萬(wàn)次讀寫(xiě)請(qǐng)求，這使得傳統(tǒng)技術(shù)難以承受如此巨大的負(fù)載。

    三是數(shù)據(jù)模型擴(kuò)展困難。在目前激烈競(jìng)爭(zhēng)的行業(yè)環(huán)境下，電信業(yè)務(wù)變化頻繁，部分?jǐn)?shù)據(jù)如客戶(hù)特征信息、客戶(hù)聯(lián)系方式等，經(jīng)常出現(xiàn)數(shù)據(jù)模型擴(kuò)展需求，對(duì)傳統(tǒng)的技術(shù)而言，數(shù)據(jù)模型的變更涉及的工作復(fù)雜而龐大。

    四是需要處理的數(shù)據(jù)類(lèi)型趨于多樣化，除了話單這樣的傳統(tǒng)格式化文本之外，還有圖片、音頻甚至視頻等，另外即使是文本，也可能是大段落的文本，難以進(jìn)行格式化處理。

    五是大量的中小行業(yè)應(yīng)用服務(wù)器，一方面占用了相當(dāng)規(guī)模的硬件資源和維護(hù)工作量，另一方面對(duì)行業(yè)應(yīng)用快速發(fā)展時(shí)，傳統(tǒng)的體系架構(gòu)難以方便地實(shí)現(xiàn)橫向擴(kuò)展。

    內(nèi)部：基礎(chǔ)設(shè)施完善

    因此，應(yīng)用大數(shù)據(jù)技術(shù)解決當(dāng)前的各種挑戰(zhàn)，對(duì)電信運(yùn)營(yíng)商有著重要意義。在此過(guò)程中電信運(yùn)營(yíng)商面臨著什么樣的機(jī)遇和挑戰(zhàn)？可利用SWOT方法（如圖所示）探知。

    從企業(yè)內(nèi)部看，電信運(yùn)營(yíng)商具備IT基礎(chǔ)設(shè)施完善、資金和人員充足、信息獲取便捷等自身優(yōu)勢(shì)。電信運(yùn)營(yíng)商從80年代起進(jìn)行信息化建設(shè)，目前已建成了業(yè)務(wù)系統(tǒng)、支撐系統(tǒng)等眾多信息化平臺(tái)，信息化基礎(chǔ)設(shè)施非常完善，積累了豐富的數(shù)據(jù)。運(yùn)營(yíng)商在信息化建設(shè)方面的投入資金每年都達(dá)數(shù)十億元，而且擁有龐大的IT研發(fā)、支撐和運(yùn)營(yíng)團(tuán)隊(duì)，能為大數(shù)據(jù)技術(shù)的研究、應(yīng)用提供資金和人力的保障。

    另外，運(yùn)營(yíng)商作為信息服務(wù)的管道，是用戶(hù)享用信息服務(wù)的必經(jīng)之路，具備獲取各種信息的天然優(yōu)勢(shì)，能夠相對(duì)容易地獲取用戶(hù)行為數(shù)據(jù)。

    當(dāng)然，運(yùn)營(yíng)商作為傳統(tǒng)企業(yè)，在運(yùn)作上相對(duì)保守，一般傾向于使用比較成熟、可靠的技術(shù)，因此對(duì)新技術(shù)的研究力度不足，技術(shù)創(chuàng)新能力也有待提高。而同時(shí)，運(yùn)營(yíng)商作為大型的國(guó)企，企業(yè)組織在地域、業(yè)務(wù)和IT等維度的條塊分割比較嚴(yán)重，地域上劃分為全國(guó)、省和地市三個(gè)層級(jí)，業(yè)務(wù)部門(mén)劃分為政企客戶(hù)、公眾客戶(hù)、市場(chǎng)營(yíng)銷(xiāo)、客服等多個(gè)部門(mén)，技術(shù)部門(mén)也劃分為業(yè)務(wù)網(wǎng)絡(luò)、無(wú)線網(wǎng)絡(luò)、支撐系統(tǒng)等多個(gè)部門(mén)，這些部門(mén)之間的互相溝通協(xié)作存在著一定的障礙，而大數(shù)據(jù)應(yīng)用往往要求從客戶(hù)的角度綜合統(tǒng)籌各種信息，一般都涉及跨地域、跨部門(mén)的協(xié)調(diào)。所有這些都是運(yùn)營(yíng)商應(yīng)用大數(shù)據(jù)技術(shù)時(shí)需要處理好的內(nèi)部不足。

    外部：技術(shù)條件成熟

    從企業(yè)外部環(huán)境看，大數(shù)據(jù)處理的軟硬件技術(shù)經(jīng)過(guò)近幾年的快速發(fā)展，已日益成熟。例如，針對(duì)關(guān)系數(shù)據(jù)庫(kù)模型過(guò)于簡(jiǎn)單，不便表達(dá)復(fù)雜嵌套的需求以及支持?jǐn)?shù)據(jù)類(lèi)型有限等局限性，從數(shù)據(jù)模型入手出現(xiàn)了高可靠、高可用、最終一致的非結(jié)構(gòu)化數(shù)據(jù)庫(kù)理論和相關(guān)產(chǎn)品；基于開(kāi)源的分布式并行計(jì)算技術(shù)，使用廉價(jià)的計(jì)算設(shè)備解決海量數(shù)據(jù)、極高并發(fā)、高可用性、高擴(kuò)展性等技術(shù)難題；采用軟硬件一體化設(shè)計(jì)技術(shù)提高數(shù)據(jù)處理效率；采用大型機(jī)x86虛擬化技術(shù)在兼容現(xiàn)有系統(tǒng)的同時(shí)，降低主機(jī)運(yùn)營(yíng)維護(hù)管理成本；采用FLASH盤(pán)等新型存儲(chǔ)技術(shù)提升IO吞吐量；采用云計(jì)算技術(shù)構(gòu)建資源池，提供面向多租戶(hù)按需分配的主機(jī)云、數(shù)據(jù)庫(kù)云服務(wù)等。

    與此同時(shí)，近年來(lái)智能移動(dòng)終端應(yīng)用快速發(fā)展，據(jù)《經(jīng)濟(jì)學(xué)家》雜志去年估計(jì)：目前人們儲(chǔ)存的數(shù)據(jù)足夠填充60000家美國(guó)國(guó)會(huì)圖書(shū)館；全世界有40億手機(jī)用戶(hù)（其中12%的人擁有智能手機(jī)）已經(jīng)將他們自己變成了數(shù)據(jù)流；智能手機(jī)的數(shù)量以每年20%的速度增長(zhǎng)，而傳感器數(shù)量的增長(zhǎng)率為30%。所有這些都意味著數(shù)據(jù)極速膨脹，而用戶(hù)的信息化需求則日益增長(zhǎng)。

    另外，新浪、騰迅、百度等互聯(lián)網(wǎng)巨頭對(duì)大數(shù)據(jù)技術(shù)的探索，也為運(yùn)營(yíng)商提供了寶貴的參考例案。

    可見(jiàn)，運(yùn)營(yíng)商應(yīng)用大數(shù)據(jù)技術(shù)具有技術(shù)日益成熟、用戶(hù)信息化需求日益增長(zhǎng)和存在可供參考案例等不可多得的外部機(jī)遇。

    當(dāng)然，在進(jìn)行大數(shù)據(jù)處理、提供數(shù)據(jù)服務(wù)的同時(shí)，也存在著如何界定和規(guī)避用戶(hù)隱私，如何解決用戶(hù)數(shù)據(jù)安全以及當(dāng)前部分互聯(lián)網(wǎng)企業(yè)已捷足先登，提供了主機(jī)云、數(shù)據(jù)庫(kù)云等服務(wù)的問(wèn)題。

    但總體而言，大數(shù)據(jù)背景下的電信運(yùn)營(yíng)商是機(jī)遇和挑戰(zhàn)并存，并且更多的是機(jī)遇。運(yùn)營(yíng)商在大數(shù)據(jù)技術(shù)研究和應(yīng)用已被互聯(lián)網(wǎng)行業(yè)拋離的趨勢(shì)下，必須緊抓有限的時(shí)間窗口奮起直追，避免徹底淪為管道的尷尬，真正轉(zhuǎn)型為綜合信息服務(wù)提供商。<