近年來,大數(shù)據(jù)所帶來的挑戰(zhàn)推動了計算技術的快速發(fā)展,催生了分布式并行處理平臺Hadoop、軟硬件一體化數(shù)據(jù)庫服務器Exadata等一批新產(chǎn)品。對于電信運營商這樣的大型企業(yè)而言,需要思考如何應用這些新技術,解決在大數(shù)據(jù)時代背景下所面臨的挑戰(zhàn),從而提升企業(yè)價值。
數(shù)據(jù)處理面臨5個挑戰(zhàn)
當前,電信運營商通過多年的信息化建設,已建成各種各樣的業(yè)務系統(tǒng)和IT支撐系統(tǒng),而隨著業(yè)務規(guī)模、用戶需求的不斷提升以及移動互聯(lián)網(wǎng)應用的快速發(fā)展,在數(shù)據(jù)處理上正面臨著各種挑戰(zhàn)。其存在的問題主要包括5個層面。
一是需要處理的數(shù)據(jù)量日益龐大,難以實現(xiàn)海量數(shù)據(jù)的高效存儲和訪問。電信運營商僅一個省公司一個月的計費清單量就多達數(shù)十億條記錄,使用傳統(tǒng)的數(shù)據(jù)處理方法效率往往低下乃至不可忍受。而運營數(shù)據(jù)的日報、月報和實時營銷等需求,更是令統(tǒng)計、分析、挖掘、營銷等系統(tǒng)不堪重負。
二是無法應對高并發(fā)讀寫的需求。當前的業(yè)務環(huán)境中,一些營銷優(yōu)惠活動,例如網(wǎng)廳的秒殺活動、iPhone首發(fā)優(yōu)惠辦理等,容易引發(fā)一些難以預估的短時間內極端高并發(fā)讀寫需求,并往往達到每秒上萬次讀寫請求,這使得傳統(tǒng)技術難以承受如此巨大的負載。
三是數(shù)據(jù)模型擴展困難。在目前激烈競爭的行業(yè)環(huán)境下,電信業(yè)務變化頻繁,部分數(shù)據(jù)如客戶特征信息、客戶聯(lián)系方式等,經(jīng)常出現(xiàn)數(shù)據(jù)模型擴展需求,對傳統(tǒng)的技術而言,數(shù)據(jù)模型的變更涉及的工作復雜而龐大。
四是需要處理的數(shù)據(jù)類型趨于多樣化,除了話單這樣的傳統(tǒng)格式化文本之外,還有圖片、音頻甚至視頻等,另外即使是文本,也可能是大段落的文本,難以進行格式化處理。
五是大量的中小行業(yè)應用服務器,一方面占用了相當規(guī)模的硬件資源和維護工作量,另一方面對行業(yè)應用快速發(fā)展時,傳統(tǒng)的體系架構難以方便地實現(xiàn)橫向擴展。
內部:基礎設施完善
因此,應用大數(shù)據(jù)技術解決當前的各種挑戰(zhàn),對電信運營商有著重要意義。在此過程中電信運營商面臨著什么樣的機遇和挑戰(zhàn)?可利用SWOT方法(如圖所示)探知。
從企業(yè)內部看,電信運營商具備IT基礎設施完善、資金和人員充足、信息獲取便捷等自身優(yōu)勢。電信運營商從80年代起進行信息化建設,目前已建成了業(yè)務系統(tǒng)、支撐系統(tǒng)等眾多信息化平臺,信息化基礎設施非常完善,積累了豐富的數(shù)據(jù)。運營商在信息化建設方面的投入資金每年都達數(shù)十億元,而且擁有龐大的IT研發(fā)、支撐和運營團隊,能為大數(shù)據(jù)技術的研究、應用提供資金和人力的保障。
另外,運營商作為信息服務的管道,是用戶享用信息服務的必經(jīng)之路,具備獲取各種信息的天然優(yōu)勢,能夠相對容易地獲取用戶行為數(shù)據(jù)。
當然,運營商作為傳統(tǒng)企業(yè),在運作上相對保守,一般傾向于使用比較成熟、可靠的技術,因此對新技術的研究力度不足,技術創(chuàng)新能力也有待提高。而同時,運營商作為大型的國企,企業(yè)組織在地域、業(yè)務和IT等維度的條塊分割比較嚴重,地域上劃分為全國、省和地市三個層級,業(yè)務部門劃分為政企客戶、公眾客戶、市場營銷、客服等多個部門,技術部門也劃分為業(yè)務網(wǎng)絡、無線網(wǎng)絡、支撐系統(tǒng)等多個部門,這些部門之間的互相溝通協(xié)作存在著一定的障礙,而大數(shù)據(jù)應用往往要求從客戶的角度綜合統(tǒng)籌各種信息,一般都涉及跨地域、跨部門的協(xié)調。所有這些都是運營商應用大數(shù)據(jù)技術時需要處理好的內部不足。