基于云端的大數(shù)據(jù)崛起

無可否認，大數(shù)據(jù)正在成為改變?nèi)藗兩畹闹匾蛩?，而大?shù)據(jù)和云計算的整合也在如火如荼地進行中。

從定量、結(jié)構(gòu)的世界，到不確定、非結(jié)構(gòu)的世界。這個轉(zhuǎn)變，使我們得以了解真實信息，提高決策水平，當社會對自然的數(shù)據(jù)有較為完善、隨時的分析能力時，我們對事件的把握及預(yù)測能力便增強。以云計算為基礎(chǔ)的信息存儲、分享和挖掘手段為知識生產(chǎn)提供了工具，通過對大數(shù)據(jù)分析、預(yù)測會使得決策更為精準，而對于許多企業(yè)而言，數(shù)據(jù)正成為在商戰(zhàn)中取勝的決定性要素。

日前落幕的第十一屆大連軟交會“2013大數(shù)據(jù)創(chuàng)新論壇”。以大數(shù)據(jù)的分析及服務(wù)為主題。邀請了來自Intel、微軟和IBM的高層專家，分享了對大數(shù)據(jù)技術(shù)的見解，共同探討大數(shù)據(jù)生態(tài)系統(tǒng)的構(gòu)建。

中國有著龐大的人群和應(yīng)用市場，復雜性高、充滿變化，如此龐大的用戶群體，構(gòu)成了世界上最為龐雜、最為繁復的數(shù)據(jù)。解決這種由大規(guī)模數(shù)據(jù)引起的問題，探索以大數(shù)據(jù)為基礎(chǔ)的解決方案，是中國產(chǎn)業(yè)升級、效率提高的重要手段。

IBM“智慧的計算”引領(lǐng)方向

作為論壇當日的一大亮點，IBM中國開發(fā)中心首席技術(shù)官毛新生在以“智慧的計算”為主題的演講中提出：大數(shù)據(jù)并不是Hadoop，Hadoop只是進行大數(shù)據(jù)分析的一個很小的分支，大數(shù)據(jù)分析是非常多樣化的領(lǐng)域，每一個領(lǐng)域自身數(shù)學模型和數(shù)學屬性，這些模型和屬性需要開發(fā)者去開發(fā)領(lǐng)域相關(guān)的算法，然后將這個算法映射到一個可以進行大規(guī)模分布的機制上，這個機制往往要利用云計算基礎(chǔ)設(shè)施達成。

作為大數(shù)據(jù)領(lǐng)域的領(lǐng)導者，IBM正在利用領(lǐng)先方法論和全面大數(shù)據(jù)技術(shù)幫助企業(yè)重新思考已有的IT模式；助力企業(yè)進行基于這場信息革命的業(yè)務(wù)轉(zhuǎn)型，獲取競爭機遇和不可估量的商業(yè)價值。同時，IBM作為目前業(yè)界唯一能夠集咨詢、服務(wù)、軟硬件綜合實力，提供端到端全面整合解決方案的廠商，相關(guān)產(chǎn)品和服務(wù)覆蓋了大數(shù)據(jù)及分析相關(guān)領(lǐng)域的各個階段、各個領(lǐng)域；IBM的大數(shù)據(jù)實踐已經(jīng)深入到包括中國在內(nèi)的全球市場的各個行業(yè)，包括電信、金融、醫(yī)療、零售、制造等眾多客戶已在IBM大數(shù)據(jù)平臺及大數(shù)據(jù)分析等技術(shù)和理念支持下獲得收益。此外，IBM還推出了一套以成果為導向的組合產(chǎn)品解決方案，包括欺詐預(yù)測、財務(wù)運營和客戶服務(wù)三大核心能力。這套解決方案廣泛匯集了IBM的智慧資本，包括軟件產(chǎn)品、基礎(chǔ)架構(gòu)、研究及咨詢服務(wù)。

針對企業(yè)大數(shù)據(jù)方向開發(fā)者，IBM推出了多款產(chǎn)品和技術(shù)，大力提升了其分析產(chǎn)品的加速性能，簡化了開發(fā)和運營。新版本企業(yè)級Hadoop產(chǎn)品InfoSphere Biglnsights可以利用現(xiàn)有的SQL技術(shù)，更便捷地開發(fā)應(yīng)用組件。兼具安全性強和高可用性特點，新版Biglnsights能夠更加契合企業(yè)部署需求。新版流計算軟件InfoSphere Streams在實時分析的開發(fā)和部署上進一步增強了操作的簡易性。新版關(guān)系數(shù)據(jù)庫管理軟件Informix包含TimeSeries Acceleration，能夠適用于智能儀表和傳感器數(shù)據(jù)的運行報告和分析。

英特爾軟硬協(xié)同、體驗至上

“大數(shù)據(jù)正在深刻地改變軟件行業(yè)、IT產(chǎn)業(yè)，以及人們生活的方方面面?！庇⑻貭杹喬邪l(fā)有限公司總經(jīng)理、英特爾軟件與服務(wù)事業(yè)部中國區(qū)總經(jīng)理何京翔博士表示：“產(chǎn)業(yè)正在重構(gòu)。我們希望與廣大產(chǎn)業(yè)鏈伙伴和開發(fā)者分享英特爾大數(shù)據(jù)技術(shù)平臺和計算解決方案，推動構(gòu)建本地‘端到端’的大數(shù)據(jù)生態(tài)環(huán)境，共同迎接智能城鎮(zhèn)建設(shè)中日益苛刻的大數(shù)據(jù)挑戰(zhàn)?！?/p>

目前，英特爾的軟件支持已經(jīng)擴展到整個軟件棧，從平臺硬件、固件、虛擬機、云計算到操作系統(tǒng)、開發(fā)工具、中間件和應(yīng)用程序，幫助廣大產(chǎn)業(yè)鏈伙伴和開發(fā)者釋放創(chuàng)新潛力，革新用戶體驗。以英特爾針對大數(shù)據(jù)的開放架構(gòu)核心產(chǎn)品線，配合英特爾Hadoop分發(fā)版，可以實現(xiàn)“軟硬協(xié)同、體驗至上”的創(chuàng)新效果。例如，利用英特爾至強處理器平臺對網(wǎng)絡(luò)和I/O技術(shù)所做的優(yōu)化，與英特爾Hadoop分發(fā)版進行強力組合，以往分析1TB的數(shù)據(jù)需要4個多小時漫長等待才能完全處理完畢，現(xiàn)在僅需短短的7分鐘即可完成，極大地提升了大數(shù)據(jù)“智能”的意義。

英特爾Hadoop目前已經(jīng)有了廣泛的應(yīng)用案例，包括智慧城市、電信、金融、醫(yī)療等行業(yè)都產(chǎn)生了用戶。在談到具體案例的時候，苗凱翔博士指出在英特爾Hadoop發(fā)行版軟件的應(yīng)用領(lǐng)域，中國比其他國家是先邁出了一大步，走在了世界的前列。以電信行業(yè)為例，英特爾Hadoop發(fā)行版已經(jīng)被中國聯(lián)通，用以進行歷史賬單及流量的查詢與分析。正是由于客戶的強烈需求，使得英特爾Hadoop這一原本在英特爾作為創(chuàng)新與嘗試性的項目最終變成實際的產(chǎn)品出現(xiàn)。

通過與本地合作伙伴的攜手努力，英特爾正在將大數(shù)據(jù)技術(shù)應(yīng)用于智慧醫(yī)療的創(chuàng)新。英特爾亞太地區(qū)研發(fā)有限公司數(shù)據(jù)中心軟件部大數(shù)據(jù)解決方案經(jīng)理王曉棟介紹了在過去一年中與用友在UEP框架下實現(xiàn)的合作，主要是基于英特爾x86集群+x86綜合解決方案，來嘗試處理現(xiàn)在在醫(yī)療中的問題。例如醫(yī)生查詢病人病例，以前可能要拿病例本才能查到，而隨著整個醫(yī)療系統(tǒng)在大數(shù)據(jù)時代的升級，所有醫(yī)療病例都集成在英特爾大數(shù)據(jù)平臺上，使其查詢速度、處理速度都達到頂級的水平。在過去一年，雙方在區(qū)域性、大型電子健康檔案和區(qū)域性的醫(yī)療質(zhì)量分析方面均進行了不同程度的嘗試。

從IT硬件系統(tǒng)，到數(shù)據(jù)管理應(yīng)用，再到數(shù)據(jù)處理和分析軟件領(lǐng)域，英特爾都擁有廣泛的合作伙伴和健康的生態(tài)系統(tǒng)，通過合作伙伴間的緊密合作，已能夠向用戶提供適用于大數(shù)據(jù)應(yīng)用，或針對此應(yīng)用進行了進一步優(yōu)化的服務(wù)器、存儲設(shè)備和網(wǎng)絡(luò)設(shè)備，以及能與這些設(shè)備實現(xiàn)無縫對接、更符合大數(shù)據(jù)應(yīng)用需求的數(shù)據(jù)管理和數(shù)據(jù)分析軟件。

大數(shù)據(jù)處理任務(wù)對于開放架構(gòu)平臺的倚重，讓英特爾在這一領(lǐng)域獲得了越來越多開發(fā)者的關(guān)注。作為全球領(lǐng)先的開放架構(gòu)平臺最核心部件——處理器平臺的提供商，英特爾首要的任務(wù)就是要打造適用于大數(shù)據(jù)應(yīng)用的“芯”，而后幫助開發(fā)者圍繞這一基礎(chǔ)創(chuàng)新打造可承載大數(shù)據(jù)應(yīng)用的基礎(chǔ)設(shè)施。英特爾還計劃在其上的數(shù)據(jù)組織與管理層，針對大數(shù)據(jù)的分發(fā)和管理需求提供針對英特爾平臺優(yōu)化的Hadoop產(chǎn)品和服務(wù)；在分析與發(fā)現(xiàn)層，提供針對客戶端與服務(wù)器端算法開發(fā)的支持，以滿足大數(shù)據(jù)計算所需的性能與規(guī)模要求；在決策支持與IT服務(wù)層，則將聯(lián)合生態(tài)系統(tǒng)內(nèi)的合作伙伴，提供更為優(yōu)化的可視化應(yīng)用體驗。英特爾所有與這些規(guī)劃相關(guān)的具體策略，將隨著大數(shù)據(jù)技術(shù)、應(yīng)用和市場的發(fā)展逐步深化、細化。

微軟攜甲骨文漫步“云端”

結(jié)合對大數(shù)據(jù)本身的認知和微軟自身強大的產(chǎn)品組合，微軟可以為用戶提供一個端到端的大數(shù)據(jù)解決方案。簡單來說，就是后端以新一代SQL Server 2012為基準平臺，將大數(shù)據(jù)管起來，然后在中端以數(shù)據(jù)集市為依托，配以豐富的數(shù)據(jù)應(yīng)用，最后在前端以豐富的界面形式展現(xiàn)數(shù)據(jù)分析的結(jié)果，完成數(shù)據(jù)的匯總——應(yīng)用與分析——結(jié)果呈現(xiàn)的完整流程。

為幫助企業(yè)快速采用其大數(shù)據(jù)解決方案，微軟將同時在Windows Azure平臺和Windows Server上提供Hadoop（在前者上用作基于云的服務(wù)，在后者上用作內(nèi)部部署的分布）。并且有非常多的第三方針對Hadoop的應(yīng)用工具，能夠在這個平臺上做到更好的分析、更好的視覺化的工作。微軟大數(shù)據(jù)解決方案還支持Mahout等通用的第三方工具與框架，通過Hadoop流，支持C++、C#、Python、Ruby和Pearl語言的定制挖掘算法。

去年9月份，微軟跟中國電信天翼平臺達成合作共識，他們把門戶網(wǎng)站的服務(wù)、災(zāi)備服務(wù)都建立在Windows Server上，這樣便整合成了一個非常完整的“云”操作系統(tǒng)。對于客戶來說，這個系統(tǒng)將帶來了相當大的價值，它能夠把你所有的應(yīng)用、所有的運維場景在線上和線下更好地管理起來。從整體角度來說，云的管理系統(tǒng)能夠幫助IT人員解決一系列操作場景。

為了讓更多初創(chuàng)企業(yè)使用微軟公有云服務(wù)，微軟大中華區(qū)副總裁兼市場戰(zhàn)略部總經(jīng)理、微軟大中華區(qū)首席云計算戰(zhàn)略官謝恩偉表示，公司已在華啟動了云加速器項目，免費為新創(chuàng)企業(yè)提供Windows Azure服務(wù)，而目的也是進一步推廣公有云服務(wù)。Windows Azure開放、可靠、易用的平臺服務(wù)大幅降低了初創(chuàng)企業(yè)系統(tǒng)開發(fā)及運營成本，幫助初創(chuàng)企業(yè)決速在全球范圍內(nèi)開展業(yè)務(wù)，并為全球用戶提供一致卓越的用戶體驗，使初創(chuàng)企業(yè)集中精力于核心業(yè)務(wù)開發(fā)，加速業(yè)務(wù)成長。目前第二期項目已接近尾聲。

此外，吸引廣大開發(fā)者眼球的好消息還包括HTML 5網(wǎng)頁app、Apache Cordova/PhoneGap和Windows Phone 7.5的開發(fā)者，現(xiàn)在可以用Azure作為服務(wù)支持。而可以享有這個權(quán)利的移動端瀏覽器包括IE8以及“現(xiàn)行版本的Chrome、Firefox、Safari和2.3以上的PhoneGap?！?/p>

近日，有國外媒體報道稱，甲骨文與微軟公司宣布在云計算領(lǐng)域展開深入合作。其中微軟云平臺Windows Azure將全面支持Oracle數(shù)據(jù)庫、Java、Weblogic和Linux。通過與甲骨文的合作，微軟能夠給Windows Azure平臺的客戶提供更多的部署選擇。但對于Azure平臺應(yīng)用在甲骨文和微軟云上的表現(xiàn)具體會如何，目前尚不得而知。

三巨頭 八仙過海各顯神通

2012年，從整個云計算解決方案ITBrand排行榜上看出，IBM、微軟、英特爾雖然在排名上有細微波動，但一直穩(wěn)居前三位。

云計算技術(shù)是目前解決大數(shù)據(jù)問題集最重要有效的手段。云計算提供了基礎(chǔ)架構(gòu)平臺，大數(shù)據(jù)應(yīng)用在這個平臺上運行。大數(shù)據(jù)是未來的行業(yè)發(fā)展趨勢，其發(fā)展勢頭已勢不可擋，而Hadoop作為更大規(guī)模分布式計算和存儲離線處理集群的代表，在今年更是紅遍了全球。英特爾一方面準備了全面的、端到端的、跨越了凌動、單路雙路及多路至強處理器產(chǎn)品的核心硬件支持，另一方面由英特爾中國團隊領(lǐng)銜開發(fā)的Apache Hadoop軟件的英特爾Hadoop分發(fā)版不但可提供開源版本所不具備的強大技術(shù)支持，還針對英特爾架構(gòu)硬件平臺進行了充分優(yōu)化；IBM的優(yōu)勢在于其信息管理平臺、信息整合與治理、分析能力，以及平衡配置的IT基礎(chǔ)架構(gòu)；微軟希望將Hadoop集成到Windows系統(tǒng)中，在Windows Azure、Windows Server、SQL server 2012上全面支持Hadoop。

在大數(shù)據(jù)分析領(lǐng)域，雖然暫時面臨技術(shù)人員匱乏的狀況，但現(xiàn)今越來越多的人開始學習Hadoop，企業(yè)也在鼓勵和培養(yǎng)技術(shù)人員學習Hadoop。廣大開發(fā)者應(yīng)抓住大數(shù)據(jù)機遇，選擇更適合的平臺技術(shù)，借助最優(yōu)的解決方案，利用大數(shù)據(jù)開發(fā)出更智能、更個性化的新一代應(yīng)用，并最終實現(xiàn)應(yīng)用經(jīng)濟的轉(zhuǎn)型升級。