通信網(wǎng)banner.jpg)
相關(guān)專題：
2016年04月12日10:21 來源：移動(dòng)通信網(wǎng)T|T
【移動(dòng)通信網(wǎng)】【2016年4月11日，中國北京】IBM公司（NYSE：IBM）近日宣布推出基于ApacheSpark的新型z/OS平臺(tái)，以幫助企業(yè)使用IBM大型主機(jī)更加方便、快捷地訪問和分析數(shù)據(jù)。此舉將給數(shù)據(jù)科學(xué)家和開發(fā)人員創(chuàng)造新的機(jī)會(huì)，幫助他們對(duì)系統(tǒng)豐富的數(shù)據(jù)集進(jìn)行高級(jí)分析，以實(shí)現(xiàn)實(shí)時(shí)洞察。ApacheSpark是一種開源的分析框架，IBM此次推出的基于Spark的z/OS平臺(tái)將支持其在z/OS主機(jī)操作系統(tǒng)上實(shí)現(xiàn)本地運(yùn)行。新的操作系統(tǒng)平臺(tái)可以幫助數(shù)據(jù)科學(xué)家打通分析庫和底層文件系統(tǒng)之間的聯(lián)系，無需進(jìn)行提取、轉(zhuǎn)換和加載（ETL）即可對(duì)數(shù)據(jù)實(shí)現(xiàn)就地分析。
在認(rèn)知時(shí)代，數(shù)據(jù)作為一種新的自然資源能夠被計(jì)算機(jī)系統(tǒng)所理解、推理和學(xué)習(xí)，但企業(yè)必須在數(shù)據(jù)價(jià)值有效期內(nèi)對(duì)其進(jìn)行分析，形成洞察并予以應(yīng)用。新的z/OS平臺(tái)配有來自業(yè)務(wù)合作伙伴的加速器，可以幫助企業(yè)更便利地利用大型主機(jī)的數(shù)據(jù)和能力，來了解市場變化和客戶的個(gè)性化需求，從而對(duì)業(yè)務(wù)及時(shí)進(jìn)行調(diào)整，更快實(shí)現(xiàn)價(jià)值。
IBM大型主機(jī)被全球各大銀行、保險(xiǎn)公司、零售商和運(yùn)輸公司廣泛用于關(guān)鍵數(shù)據(jù)處理和交易。它擁有業(yè)界最快的商用微處理器，以及內(nèi)置的交易分析功能，可以在不超過2毫秒的時(shí)間內(nèi)為某項(xiàng)交易的預(yù)測模型評(píng)分。目前，企業(yè)可以利用這些功能，在無需從主機(jī)中下載數(shù)據(jù)（withoutmovingdataoffthemainframe）的條件下通過Spark來進(jìn)行高級(jí)內(nèi)存中分析，既節(jié)省時(shí)間和成本，又降低風(fēng)險(xiǎn)。
IBM專注于新興互聯(lián)網(wǎng)技術(shù)的院士RodSmith表示，“各種規(guī)模的企業(yè)在向?qū)崟r(shí)數(shù)字化轉(zhuǎn)型時(shí)，都需要對(duì)自己所有的數(shù)據(jù)了解清楚，這個(gè)過程不應(yīng)花費(fèi)過多的時(shí)間，也不應(yīng)有提取、轉(zhuǎn)換和加載（ETL）的風(fēng)險(xiǎn)�，F(xiàn)在我們實(shí)現(xiàn)了在包括大型主機(jī)在內(nèi)的IBM平臺(tái)上本地（natively）運(yùn)行ApacheSpark，客戶可以并行執(zhí)行處理關(guān)鍵數(shù)據(jù)的交易處理系統(tǒng)和分析系統(tǒng)，同時(shí)從其他數(shù)據(jù)源獲取關(guān)聯(lián)洞察，幫助他們與客戶進(jìn)行實(shí)時(shí)互動(dòng)，繼而產(chǎn)生效益�！�
基于ApacheSpark推出的IBMz/OS平臺(tái)具備ApacheSparkcore、SparkSQL、SparkStreaming、MachineLearningLibrary(MLlib)和Graphx等開源功能，可提供業(yè)內(nèi)唯一的主機(jī)常駐Spark數(shù)據(jù)提取解決方案。新的平臺(tái)幫助企業(yè)通過以下途徑更加高效、安全地獲取信息：
"簡化開發(fā)——開發(fā)人員和數(shù)據(jù)科學(xué)家可利用他們已有的Scala、Python、R和SQL等編程經(jīng)驗(yàn)來更快實(shí)現(xiàn)可用洞察的價(jià)值。
"簡化數(shù)據(jù)訪問——經(jīng)過優(yōu)化的數(shù)據(jù)抽象化服務(wù)消除了復(fù)雜性，通過ApacheSparkAPI使用熟悉的工具對(duì)IMS、VSAM、DB2z/OS、PDSE或SMF等傳統(tǒng)格式實(shí)現(xiàn)企業(yè)數(shù)據(jù)的無縫訪問。
"就地?cái)?shù)據(jù)分析（In-placedataanalytics）——ApacheSpark使用內(nèi)存計(jì)算來處理數(shù)據(jù)，可以快速產(chǎn)生結(jié)果。新平臺(tái)具備數(shù)據(jù)抽象和集成服務(wù)功能，可以讓z/OS分析應(yīng)用程序利用標(biāo)準(zhǔn)SparkAPI。這可以讓企業(yè)就地分析數(shù)據(jù)，避免產(chǎn)生提取、轉(zhuǎn)換和加載相關(guān)的高額處理和安全性問題。
"開源功能——新平臺(tái)提供了一個(gè)應(yīng)用于ApacheSpark、專門針對(duì)大數(shù)據(jù)設(shè)計(jì)的開源內(nèi)存計(jì)算引擎。
IBM也在與DataFactZ、RocketSoftware和Zementis這三家公司進(jìn)行合作，通過IBMz/OS平臺(tái)為ApacheSpark開發(fā)定制解決方案：
"DataFactZ是IBM新的合作伙伴，雙方正在合作開發(fā)基于SparkSQL和MLlib的Spark分析產(chǎn)品，以用于在大型機(jī)上處理的數(shù)據(jù)和交易。
"RocketSoftware已經(jīng)成為IBM的長期合作伙伴，兩家公司在z/OSApacheSpark領(lǐng)域也已展開合作。比如，新的RocketLaunchpad解決方案可以讓客戶使用z/OS數(shù)據(jù)來體驗(yàn)平臺(tái)功能。
"Zementis正在開發(fā)支持ApacheSpark的基于多個(gè)標(biāo)準(zhǔn)的執(zhí)行引擎。作為一款新的z/OS交易中預(yù)測分析（in-transactionpredictiveanalytics）解決方案，它允許用戶在處理交易時(shí)部署和執(zhí)行高級(jí)預(yù)測模型，幫助用戶在影響最大的時(shí)候?qū)崟r(shí)地預(yù)測終端用戶需求、計(jì)算機(jī)風(fēng)險(xiǎn)或偵測欺詐。
基于ApacheSpark推出的全新z/OS平臺(tái)以及合作伙伴相關(guān)解決方案，可以讓那些從不同來源采集數(shù)據(jù)的數(shù)據(jù)科學(xué)家和數(shù)據(jù)管理員用自己喜歡的格式和工具來收集和分析數(shù)據(jù)。
IBM去年發(fā)布了一項(xiàng)針對(duì)Spark的承諾，將投入3500名IBM研究人員和開發(fā)人員參與與Spark相關(guān)的項(xiàng)目。為了推進(jìn)支持大型主機(jī)分析的開源技術(shù)，大型主機(jī)還成了一個(gè)新的GitHub組織，以便開發(fā)人員協(xié)作建立針對(duì)Spark的z/OS工具。比如，ProjectJupyter和任一NoSQL數(shù)據(jù)庫的組合都能提供靈活、可擴(kuò)展的數(shù)據(jù)處理和分析解決方案.
這一方法可以幫助件開發(fā)人員選擇他們的工具和語言，提供能夠在不同數(shù)據(jù)環(huán)境中監(jiān)控分析結(jié)果的新型視覺輔助工具，開發(fā)出新的數(shù)據(jù)處理技術(shù)和技巧，從而讓新的開源工具更易使用。
