我相信下面這個等式似曾相識？

Websphere + apache=eBusiness(decade defined by commerce)

BigData and Analytics + Apache Spark (decade defined by data)=?

在過去的十年里，當IBM決心做一件事情時，假以時日，就是能做到最好。Java出現(xiàn)，如何在企業(yè)里面應用？IBM大力研發(fā)Websphere Application Server（WAS），結果WAS現(xiàn)在就是市場里面最強的Java開發(fā)運行的中間件品牌，其出色性能和穩(wěn)定性是企業(yè)不二的選擇。

好，回到我們的主題。今天IBM說我們要大力支持Spark，具體有哪些動作？

首先，我們已經(jīng)在2015年3月31號發(fā)布了Hadoop商業(yè)版本BigInsights 4.0，里面包含了Apache Spark 1.2.1，所以客戶可以通過購買BigInsights 4.0來使用Spark，并且得到IBM的官方產(chǎn)品支持，解決開發(fā)和生產(chǎn)遇到的問題；IBM是Open Data Platform(ODP)頂級成員之一，因此也將在后續(xù)發(fā)布的BigInsights版本內包含最新經(jīng)過組織認證的Spark版本。未來Spark版本經(jīng)過ODP認證后，穩(wěn)定性有保證，售后又有IBM支持，用戶可以放心使用吧？IBM在流計算領域有個很重要的商業(yè)產(chǎn)品Streams，它歷史有10多年了，目前發(fā)行版本已經(jīng)很快的把Spark模塊包含進去了，因此使用Spark寫的Java代碼已經(jīng)可以部署運行在Streams平臺中，用戶可以在同一個Cluster內運行Streams和Spark實現(xiàn)的代碼！關于這個部分的技術我們將在未來文章中詳細講解。我們同時也把IBM自己的機器學習代碼SystemML共享給開源社區(qū)，它可是Watson機器的核心哦！若有興趣，也可以下載深入研究下。

其次，Spark項目目前最重要的商業(yè)支持公司是DataBricks, 它的“Certified Spark Distribution”Program認證現(xiàn)在市場的發(fā)行商業(yè)版本與Apache Spark完全100%兼容。IBM發(fā)行的Spark商業(yè)版本已經(jīng)得到認證，因此這可不是無證上崗啊！全球也僅認證了十來家，目前得到認證的國內企業(yè)并不多，因此不要被市場亂象所影響；可以通過這個鏈接查看認證企業(yè)名單 //databricks.com/spark/certification/certified-spark-distribution

再有，IBM發(fā)布支持Spark消息后，將開足馬力將一些重量級的產(chǎn)品部署和利用到Spark的計算框架，例如在BlueMix云上提供Spark服務，目前已經(jīng)有Beta版本了，服務將很快正式發(fā)布，用戶可以直接租用云環(huán)境進行Spark高性能運算！在IBM旗艦數(shù)據(jù)挖掘產(chǎn)品SPSS Modeler中引入Spark計算等，在傳統(tǒng)數(shù)據(jù)倉庫一體機中將傳統(tǒng)SQL中涉及到需要的流處理數(shù)據(jù)推送到Spark平臺進行處理等；相信這些產(chǎn)品都將在未來不久得到發(fā)布，我們也將在未來一系列文章中分享這部分的技術。

最后，市場人才奇缺？沒問題，IBM提供免費的培訓！這個學習網(wǎng)站是bigdatauniversity.com，里面不單有大數(shù)據(jù)培訓視頻，還有大量進階練習和實踐分享，最重要學完后有證書，可以在各大職場上使用！當然在國內也有與大學合作計劃，這里就不細談。客戶若想了解具體的Spark應用場景，IBM也成立了專門的技術演示中心，有專業(yè)人士講解業(yè)務場景是什么，如何將這個技術引入到企業(yè)內。

當然，從市場的反饋看，目前Spark技術發(fā)展很快，每過很短時間就會發(fā)布新的版本，它的技術還在發(fā)展，易用性也不夠，所以我們拭目以待，看接下來的發(fā)布的產(chǎn)品是否大的驚喜。

詳情請咨詢“”！

客服熱線：023-66090381