握住大數(shù)據(jù)的七寸

陳翔

近日，浪潮發(fā)布了其大數(shù)據(jù)一體機(jī)系統(tǒng)軟件——浪潮云谷Cloud Canyon V1.0。

作為大數(shù)據(jù)系統(tǒng)軟件，云谷是浪潮大數(shù)據(jù)戰(zhàn)略落實的關(guān)鍵點，浪潮能否由此握住大數(shù)據(jù)的七寸？

從數(shù)據(jù)庫一體機(jī)到大數(shù)據(jù)一體機(jī)，軟硬垂直整合不僅是IT廠商的產(chǎn)品趨勢，也成為企業(yè)用戶未來的主流選擇。之所以成為主流，關(guān)鍵詞就在于性能——軟硬優(yōu)化后的一體機(jī)性能更為優(yōu)異。于是，自甲骨文、IBM等具有自有軟硬件品牌的大型IT企業(yè)推出一體機(jī)后，市場上也出現(xiàn)了形形色色的軟硬廠商聯(lián)合優(yōu)化捆綁的一體機(jī)產(chǎn)品。

尤其對于大數(shù)據(jù)一體機(jī)來說，由于Hadoop的開放架構(gòu)，使得不少具有軟件開發(fā)能力的IT企業(yè)都得以有機(jī)會開發(fā)自己的Hadoop商業(yè)版本，從而進(jìn)入大數(shù)據(jù)領(lǐng)域。而有著硬件技術(shù)優(yōu)勢的浪潮，自去年發(fā)布云海大數(shù)據(jù)一體機(jī)之后，也一直圍繞大數(shù)據(jù)一體機(jī)的核心——系統(tǒng)軟件緊鑼密鼓地進(jìn)行技術(shù)積累。

近日，浪潮終于發(fā)布了其大數(shù)據(jù)一體機(jī)系統(tǒng)軟件——浪潮云谷Cloud Canyon V1.0。作為大數(shù)據(jù)系統(tǒng)軟件，云谷對于浪潮的大數(shù)據(jù)戰(zhàn)略可謂四兩撥千斤。它不僅在技術(shù)戰(zhàn)略上讓浪潮云海大數(shù)據(jù)一體機(jī)有了核心引擎，還進(jìn)一步聚焦了浪潮的大數(shù)據(jù)行業(yè)市場戰(zhàn)略，而其向ISV、SI開放總線開發(fā)平臺的做法，則奠定了浪潮布局平臺化軟硬件整體解決方案，以開放推動“大數(shù)據(jù)生態(tài)鏈”發(fā)展全新產(chǎn)品的戰(zhàn)略，開啟了浪潮“產(chǎn)品+服務(wù)”的端到端交付大數(shù)據(jù)整體戰(zhàn)略。

聚焦行業(yè)大數(shù)據(jù)

正如當(dāng)初進(jìn)入云計算領(lǐng)域時，面對國際廠商在私有云領(lǐng)域的優(yōu)勢，浪潮選擇行業(yè)云作為主攻方向一樣，在大數(shù)據(jù)領(lǐng)域，浪潮智慧地選擇了行業(yè)大數(shù)據(jù)為主攻方向。浪潮集團(tuán)大數(shù)據(jù)產(chǎn)品部總經(jīng)理王峰明確表示，金融、通信、公安、交通是浪潮重點發(fā)力的四大行業(yè)。

為什么選擇這四大行業(yè)？就浪潮的定位來看，金融和通信的行業(yè)大數(shù)據(jù)應(yīng)用重點在于歷史數(shù)據(jù)的管理解決方案，主要為海量結(jié)構(gòu)化數(shù)據(jù)的應(yīng)用與分析；公安和交通的行業(yè)大數(shù)據(jù)應(yīng)用重點則在于智能治安卡口支持系統(tǒng)解決方案，主要為圖片、視頻等非結(jié)構(gòu)化數(shù)據(jù)的處理與應(yīng)用。

在浪潮看來，金融和通信兩大行業(yè)的歷史數(shù)據(jù)含金量最高，它們就如同兩張并行的網(wǎng)絡(luò)，描繪出每個人的資金交易和生活圈。“但是，基于傳統(tǒng)交易型數(shù)據(jù)庫的成本原因，這些結(jié)構(gòu)化數(shù)據(jù)被作為存儲備份檔案的方式存儲，從熱數(shù)據(jù)變成了長尾數(shù)據(jù)，又從長尾數(shù)據(jù)變成了死數(shù)據(jù)，最后被銷毀。”王峰表示，“這些海量的歷史數(shù)據(jù)沒有被好好利用和分析，它們可以被用于提升客戶體驗，甚至可以構(gòu)成一套準(zhǔn)確的信用體系。”

而在公安和交通行業(yè)，每天攝像頭都會產(chǎn)生大量視頻信息，身份證、指紋識別等圖片也是重要的非結(jié)構(gòu)化數(shù)據(jù)。以交通行業(yè)為例，北京有超過50萬個卡口攝像頭，每天會記錄過億條數(shù)據(jù)，產(chǎn)生幾十TB的數(shù)據(jù)量?？谙到y(tǒng)的數(shù)據(jù)既有結(jié)構(gòu)化的車輛信息數(shù)據(jù)，又有非結(jié)構(gòu)化的圖片、視頻數(shù)據(jù)。如果可以迅速處理某張車輛照片對應(yīng)的車主，就可以提高公安系統(tǒng)追蹤違法車輛的效率，及時發(fā)現(xiàn)駕駛員異常或車輛異常，提前報警，還可以降低交通事故的發(fā)生率。 據(jù)悉，浪潮與某省交通行業(yè)合作的以云海一體機(jī)為基礎(chǔ)的機(jī)動車套牌系統(tǒng)不久即將上線。

軟件定義一切

在軟件定義一切的今天，大數(shù)據(jù)的核心競爭力依然是軟件的競爭。浪潮去年發(fā)布的云海一體機(jī)奠定了其在大數(shù)據(jù)領(lǐng)域硬件自主研發(fā)的技術(shù)基礎(chǔ)，而云谷則使得大數(shù)據(jù)可以運行在浪潮自有的平臺軟件之上。

盡管這只是云谷1.0版本，但它在底層架構(gòu)上已經(jīng)具備了一個商業(yè)版Hadoop在關(guān)鍵領(lǐng)域應(yīng)用的雛形，并已可以應(yīng)對金融、電信、公安、交通四大行業(yè)的結(jié)構(gòu)化歷史大數(shù)據(jù)與卡口系統(tǒng)非結(jié)構(gòu)化大數(shù)據(jù)的特定大數(shù)據(jù)應(yīng)用。王峰表示，與互聯(lián)網(wǎng)公司擁有強(qiáng)大的技術(shù)背景不同的是，行業(yè)用戶和傳統(tǒng)企業(yè)往往缺乏基于開源Hadoop構(gòu)建大數(shù)據(jù)應(yīng)用的相關(guān)能力和經(jīng)驗，而集成大數(shù)據(jù)系統(tǒng)軟件并針對行業(yè)應(yīng)用場景調(diào)優(yōu)的平臺化整體解決方案，才是行之有效的應(yīng)對之道。

云谷1.0版本是浪潮自主研發(fā)的面向行業(yè)海量數(shù)據(jù)整合、分析、挖掘的大數(shù)據(jù)平臺，具備電信級可靠性、數(shù)據(jù)驅(qū)動的彈性擴(kuò)展能力、與現(xiàn)有系統(tǒng)的無縫集成、自適應(yīng)的智能管理等特性。通過包括HDFS、MapReduce、HBase、HIVE等多個維度的創(chuàng)新算法、規(guī)?；倪M(jìn)和優(yōu)化，云谷1.0版本在性能方面實現(xiàn)了突破。據(jù)王峰透露，相關(guān)測試數(shù)據(jù)表明，在數(shù)據(jù)排序、聯(lián)合查詢等應(yīng)用場景中，云谷1.0版本可讓傳統(tǒng)系統(tǒng)的性能提升10倍以上。同時，用戶可獲得可視化的管理界面，有效管理和調(diào)配資源，節(jié)省物理服務(wù)器資源，提高資源利用率，保障業(yè)務(wù)可靠運行與數(shù)據(jù)安全。

“蘋果”模式

一體機(jī)雖然提升了性能，但軟硬一體化的后果往往就是將行業(yè)用戶與一家IT廠商牢牢捆綁在一起，從而削弱了用戶的議價權(quán)。浪潮則期望在大數(shù)據(jù)領(lǐng)域構(gòu)建“蘋果”模式。

在浪潮看來，大數(shù)據(jù)應(yīng)用的難題在于如何有效貫穿企業(yè)的業(yè)務(wù)流程。從用戶的應(yīng)用環(huán)境到底層的基礎(chǔ)架構(gòu)平臺，產(chǎn)業(yè)鏈的參與者缺乏完整的端到端的能力和經(jīng)驗。具體到不同行業(yè)的應(yīng)用場景，大數(shù)據(jù)的特征和需求也不盡相同。例如，金融行業(yè)更加關(guān)注系統(tǒng)的可擴(kuò)展性，在此基礎(chǔ)上才能進(jìn)一步解決數(shù)據(jù)挖掘及數(shù)據(jù)業(yè)務(wù)價值的問題。在公安、交通等行業(yè)，在海量的非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)存儲之上，如何有效地關(guān)聯(lián)與分析資料代表了未來的應(yīng)用前景。

“針對不同的行業(yè)大數(shù)據(jù)應(yīng)用需求，浪潮的產(chǎn)品策略是以平臺化的產(chǎn)品思路和專屬化的系統(tǒng)優(yōu)勢切入市場，為行業(yè)大數(shù)據(jù)應(yīng)用搭建通道?！蓖醴逭J(rèn)為，“從數(shù)據(jù)的積累、流轉(zhuǎn)、處理到價值‘變現(xiàn)，大數(shù)據(jù)是一條尚待完善的，需要系統(tǒng)廠商與SI、ISV等合作伙伴攜手共榮的生態(tài)鏈。”

為此，浪潮的云谷平臺支持開發(fā)總線應(yīng)用，不僅提供基于業(yè)界標(biāo)準(zhǔn)接口各種接口，還提供了便捷的開發(fā)工具與完善的SDK（開發(fā)包）。另外，浪潮還將成立大數(shù)據(jù)ISV的行業(yè)聯(lián)盟，并展開ISV遷移資助計劃。目前，已有多家合作伙伴測試并部署了云谷1.0版本，以及浪潮大數(shù)據(jù)一體機(jī)平臺，并推出了商業(yè)銀行歷史數(shù)據(jù)管理、智能治安卡口支持系統(tǒng)等解決方案。

應(yīng)該說，在云計算的推動下，“從數(shù)據(jù)到服務(wù)”的趨勢正將云計算的商業(yè)和服務(wù)模式引向行業(yè)大數(shù)據(jù)的發(fā)展階段。王峰表示，浪潮的大數(shù)據(jù)戰(zhàn)略就是端到端的業(yè)務(wù)策略，為了實現(xiàn)“產(chǎn)品+服務(wù)”的端到端交付。這無疑超出了一個傳統(tǒng)系統(tǒng)提供商的交付范疇，浪潮正通過大數(shù)據(jù)推動“從數(shù)據(jù)到業(yè)務(wù)、從數(shù)據(jù)到服務(wù)”的產(chǎn)業(yè)鏈縱向整合。