本刊記者 | 張鵬
互聯(lián)網(wǎng)正在將一切 “數(shù)字化”,比如金融保險、買賣交易以及人與人的社交關(guān)系等,當(dāng)這些數(shù)字化的信息被互聯(lián)網(wǎng)企業(yè)所串聯(lián),又將加速這些數(shù)據(jù)的幾何級增長。
據(jù)GSA統(tǒng)計(jì),截至2013年底,全球?qū)⒂?60個LTE商用網(wǎng)絡(luò),由此移動通信正式步入4G時代。無論對于消費(fèi)者還是服務(wù)商而言,這都是一個好消息。對于普通消費(fèi)者而言,4G網(wǎng)絡(luò)帶來了大幅度的網(wǎng)速提升,最大化增強(qiáng)用戶體驗(yàn);對于服務(wù)提供方來說,盡管空口速率的提升進(jìn)一步加大了后端管道的流量壓力,但是由此激發(fā)的移動互聯(lián)網(wǎng)流量也將促使業(yè)界出現(xiàn)更多商業(yè)模式和盈利空間。
美國無線運(yùn)營商Verizon建設(shè)LTE已有3年左右時間,在2012年9月,其在網(wǎng)用戶網(wǎng)速達(dá)到11M,占據(jù)Verizon總用戶數(shù)的12%,流量消耗占到全網(wǎng)的35%以上,而到了2013年初,其4G流量已經(jīng)占到全網(wǎng)流量的50%以上,而在最近這一占比更是提升至64%。不難看出,4G對于移動互聯(lián)網(wǎng)流量的促進(jìn)效用可見一斑。
面對如何快速的流量增長,互聯(lián)網(wǎng)企業(yè)、電信運(yùn)營商一方面試圖通過不斷采用新技術(shù)等提升網(wǎng)絡(luò)的利用率,另一方面也在探索如何在這數(shù)字海洋中尋求價值與創(chuàng)新。
如果說2012年,“大數(shù)據(jù)”僅僅是被業(yè)界所熟知與認(rèn)識,那么在2013年,受到4G發(fā)牌與寬帶提速等利好消息的影響,那些曾被封為是“看上去很美”的大數(shù)據(jù)應(yīng)用與方案正在嘗試落地與實(shí)施。
作為國內(nèi)最大的電子商務(wù)平臺,阿里巴巴每天都在大規(guī)模獲得數(shù)以P級的用戶數(shù)據(jù)與交易信息,多年來在阿里巴巴從事大數(shù)據(jù)相關(guān)工作的張茂森對此表示,互聯(lián)網(wǎng)正在將一切“數(shù)字化”,比如金融保險、買賣交易以及人與人的社交關(guān)系等,當(dāng)這些數(shù)字化的信息被互聯(lián)網(wǎng)所串聯(lián),又將加速這些數(shù)據(jù)的幾何級增長,而電子商務(wù)就是要找到“對”的數(shù)據(jù)整合起來形成交易。
在這方面,國外一些優(yōu)秀的互聯(lián)網(wǎng)企業(yè)已經(jīng)形成了一些較為成熟的解決方案,比如Google、Amazon將大數(shù)據(jù)功能服務(wù)化,提供給客戶付費(fèi)使用;Facebook和Twitter等社交網(wǎng)站則基于大數(shù)據(jù)能力為億萬用戶做業(yè)務(wù)推送。而在國內(nèi),包括互聯(lián)網(wǎng)企業(yè)、IT廠商以及電信運(yùn)營商在內(nèi)的眾多領(lǐng)先企業(yè),也在嘗試通過大數(shù)據(jù)能力在企業(yè)內(nèi)外部提供決策支撐、業(yè)務(wù)創(chuàng)新等方面的探索。
聯(lián)想集團(tuán)中國區(qū)大客戶事業(yè)部成熟行業(yè)總經(jīng)理兼企業(yè)級產(chǎn)品營銷總經(jīng)理劉征告訴記者:“除了傳統(tǒng)的PC與IT硬件,聯(lián)想這兩年也不斷增強(qiáng)自身的軟實(shí)力,目前聯(lián)想內(nèi)部正在使用的大數(shù)據(jù)平臺就是完全自主開發(fā)的,公司內(nèi)部在該平臺之上完成各種市場行為分析、產(chǎn)品設(shè)計(jì)以及用戶習(xí)慣挖掘等應(yīng)用,經(jīng)過驗(yàn)證,目前這套大數(shù)據(jù)分析的方案已經(jīng)成熟并可以將其商用化?!?/p>
而在國外,一些互聯(lián)網(wǎng)企業(yè)正在讓“大數(shù)據(jù)”發(fā)揮更多的效能。
眾所周知,Google在全球擁有眾多的數(shù)據(jù)中心,但其對于IDC的整合以及重復(fù)利用卻做到了“極致”。作為Google賴以為生的核心業(yè)務(wù)“廣告”,長年以來就是依賴于大數(shù)據(jù)的應(yīng)用與發(fā)展。據(jù)悉,在2011年,Google的MapReduce系統(tǒng)每天可以處理1000PB左右的輸入數(shù)據(jù)來支撐其核心業(yè)務(wù),包括了搜索、廣告、地圖、郵件、社區(qū)等。Google還能夠針對不同的數(shù)據(jù)處理需求提供多種不同的數(shù)據(jù)處理系統(tǒng),同時不斷將這些大數(shù)據(jù)的處理能力服務(wù)化。
Amazon作為全球較早實(shí)現(xiàn)云服務(wù)的數(shù)據(jù)中心服務(wù)商,也依托大數(shù)據(jù)實(shí)現(xiàn)了自身業(yè)務(wù)服務(wù)的增值。由于整合了非結(jié)構(gòu)化和結(jié)構(gòu)化,Amazon通過并行計(jì)算能力,將數(shù)據(jù)放入RedShift用于最終展現(xiàn),目前Amazon已經(jīng)可以為其托管應(yīng)用提供諸如多租戶、按使用付費(fèi)等大數(shù)據(jù)的服務(wù)。
相比起來,電信運(yùn)營商對于“大數(shù)據(jù)”的出現(xiàn)似乎有些又愛又恨。不斷擴(kuò)張的網(wǎng)絡(luò)規(guī)模與用戶基礎(chǔ)勢必將導(dǎo)致更多的數(shù)據(jù)出現(xiàn),電信運(yùn)營商們需要面對日益增長的用戶與網(wǎng)絡(luò)數(shù)據(jù),“信令風(fēng)暴”等負(fù)面效應(yīng)逐漸凸顯。以中國移動為例,目前其已經(jīng)擁有超過7.1億的用戶數(shù)量,全國基站數(shù)量超過100萬,每分鐘的通話連接超過800萬,而另一方面的數(shù)據(jù)是,每天信令數(shù)據(jù)超過1PB,每秒的上網(wǎng)流量超過40GB。
如何讓這些數(shù)據(jù)“變負(fù)擔(dān)為盈利”,是考驗(yàn)當(dāng)下電信運(yùn)營商的智慧所在。運(yùn)營商需要不斷增強(qiáng)自身對于網(wǎng)絡(luò)的管控與分流能力,并從獲得的大量數(shù)據(jù)中挖掘創(chuàng)新型業(yè)務(wù)。中國移動研究院錢嶺對此表示,目前,大數(shù)據(jù)已經(jīng)成為運(yùn)營商進(jìn)行網(wǎng)絡(luò)優(yōu)化、業(yè)務(wù)創(chuàng)新、精準(zhǔn)營銷和決策支持等工作的基礎(chǔ)參考。
據(jù)錢嶺介紹,目前由中國移動主導(dǎo)研發(fā)的“大云”2.5云計(jì)算平臺已經(jīng)在PaaS層建立了完整的數(shù)據(jù)管理/分析系統(tǒng)。在大數(shù)據(jù)基礎(chǔ)平臺的開發(fā)中,中國移動雖然是基于開源Hadoop,但并沒有完全套用,而是針對目前大數(shù)據(jù)的實(shí)際分析需求,在此基礎(chǔ)上研發(fā)了獨(dú)特的符合自身數(shù)據(jù)抓取與分析特點(diǎn)的BCHadoop大數(shù)據(jù)平臺。
據(jù)悉,BC-Hadoop大數(shù)據(jù)平臺具備了大規(guī)模、高性能、多租戶、高可用以及接口標(biāo)準(zhǔn)化等特點(diǎn),目前可以支持4000節(jié)點(diǎn)組成的單個大數(shù)據(jù)集群,實(shí)現(xiàn)了多用戶之間的計(jì)算與存儲資源相對隔離的目標(biāo),以及向下兼容的標(biāo)準(zhǔn)化接口。目前,“大云”2.5平臺可以實(shí)現(xiàn)大數(shù)據(jù)的ETL業(yè)務(wù)、查詢業(yè)務(wù)以及挖掘業(yè)務(wù)等。