亞馬遜推出的Prince Check軟件,讓消費者可以在零售店通過(guò)智能手機掃描產(chǎn)品編碼,實(shí)時(shí)比價(jià),在最近距離和傳統零售商爭奪客戶(hù)銷(xiāo)售額。Google每分鐘可以支持來(lái)自世界各地的70萬(wàn)次查詢(xún)。其強大的查詢(xún)引擎和IT架構支撐,使得Google手機一上市就獲得較好成績(jì)。大數據讓零售無(wú)需店面,在最大限度降低投資同時(shí),加快現金流周轉效率。大數據使各行各業(yè)商家提高獲取優(yōu)質(zhì)客戶(hù)資源和提升利潤空間的同時(shí),也使競爭進(jìn)入“一兵一卒”用戶(hù)爭奪戰之中。
大數據時(shí)代,企業(yè)數據量和數據種類(lèi)出現飛速增長(cháng)。大數據時(shí)代,全球應用數量從幾年前的以十萬(wàn)為單位計算,到了以百萬(wàn)為單位計算。10年前,IT從業(yè)人員只是以百萬(wàn)計算,數據生成來(lái)源也比較單一,但現在,IT服務(wù)使用者已經(jīng)上升到十幾億的消費者,數據生成來(lái)源更為豐富,是名副其實(shí)的大數據時(shí)代 。同時(shí),IT資源的配置和管理要滿(mǎn)足高度虛擬化或集群IT架構的需求。企業(yè)應用部署效率、業(yè)務(wù)穩定服務(wù)性能,以及動(dòng)態(tài)有效滿(mǎn)足OLTP和OLAP性能要求,直接決定著(zhù)企業(yè)核心競爭力。企業(yè)要求存儲更靈活、更動(dòng)態(tài)、性能更穩定,以支撐大量用戶(hù)對各種IT服務(wù)交付的能力。此外,大數據時(shí)代還需要集中、統一和自動(dòng)化管理的功能。
中橋2013年7月完成的中國大數據市場(chǎng)調查結果顯示了,中國市場(chǎng)針對大數據的需求所面臨的典型的存儲挑戰,就此我們看看此次EMC在米蘭發(fā)布的技術(shù)是如何解決這些大數據存儲挑戰的。
1.業(yè)務(wù)關(guān)鍵型性能:就“存儲是否能滿(mǎn)足目前業(yè)務(wù)關(guān)鍵應用性能”的調查結果顯示,接受調查人員(總計455名受訪(fǎng)者)中28.1%表示在未來(lái)12個(gè)月考慮部署新型存儲。36.5%用戶(hù)在未來(lái)12-24個(gè)月考慮部署新存儲。大數據時(shí)代,應用使用者的快速增加,對存儲并行處理能力提出了更高要求。此外,生產(chǎn)應用虛擬化產(chǎn)生大量隨機讀取,這就對傳統IOPs和時(shí)間延遲提出了挑戰。
EMC米蘭發(fā)布的MCx技術(shù)讓用戶(hù)可以通過(guò)多核并行處理方式,經(jīng)濟地提高大數據時(shí)代存儲對并行處理能力的需求。相對于通過(guò)增加控制器和磁盤(pán)形式提高存儲IOPs,這種多核動(dòng)態(tài)優(yōu)化技術(shù)更為經(jīng)濟,且不會(huì )增加管理強度和開(kāi)支。此外,MCx結合靈活閃存技術(shù),可以滿(mǎn)足大數據環(huán)境下不同應用對IOPs或MBPs的性能需求,并降低時(shí)間延遲。
2.存儲利用率:大數據時(shí)代數據量快速增加。如何通過(guò)存儲容量?jì)?yōu)化,降低存儲容量和網(wǎng)絡(luò )資源需求,降低數據保護過(guò)程對生產(chǎn)環(huán)境的性能影響,是控制大數據存儲新增開(kāi)支的關(guān)鍵。
EMC的VNX產(chǎn)品支持壓縮和重復數據刪除,不僅降低存儲容量需求。同時(shí),也降低數據傳輸過(guò)程中對網(wǎng)絡(luò )資源的需求。
3. 容量?jì)?yōu)化系統性能:為了提高存儲資源利用率和業(yè)務(wù)連續性,存儲廠(chǎng)商近年紛紛推出各種企業(yè)級功能。為了降低存儲管理強度,中端以上存儲具有多種工作負載性能監控、動(dòng)態(tài)資源配置和自動(dòng)化端對端管理功能。然而,傳統存儲控制器處理能力有限,啟動(dòng)這些企業(yè)級功能需要消耗存儲控制器資源。用戶(hù)往往要在存儲資源優(yōu)化和生產(chǎn)性能之間做取舍。
EMC米蘭發(fā)布的MCx通過(guò)多核并行處理,讓控制器具有更強大的處理能力,保證啟用企業(yè)級功能不影響業(yè)務(wù)性能,實(shí)現優(yōu)化和高性能并舉。此外,通過(guò)控制信息和數據通道分流,徹底解決了控制信息和數據流資源爭用導致的性能問(wèn)題。保證大數據時(shí)代,在不同業(yè)務(wù)發(fā)展階段下應用性能穩定性的需求。
4.在大數據時(shí)代如何利用各種已有存儲資源,為大數據時(shí)代的業(yè)務(wù)發(fā)展提供高可擴展和業(yè)務(wù)連續性是關(guān)鍵。傳統存儲下,不同廠(chǎng)商的存儲之間無(wú)法實(shí)現快照、復制、備份和恢復,由此帶來(lái)數據保護的大量開(kāi)支。同時(shí),帶來(lái)存儲資源浪費。
EMC的ViPR多種標準API,可部署在ViPR支持的任何文件存儲系統上,這種支持多種平臺的戰略和開(kāi)放的可擴展性能夠充分為大數據環(huán)境的跨平臺、資源靈活性和開(kāi)源平臺提供IT支撐。用戶(hù)不僅可以在ViPR框架下支持第三方存儲設備,同時(shí)可以支撐開(kāi)源技術(shù)。讓用戶(hù)可以利用服務(wù)器存儲、直連存儲、第三方網(wǎng)絡(luò )存儲,甚至是標配磁盤(pán)技術(shù),滿(mǎn)足大數據演進(jìn)過(guò)程的存儲需求。
中橋首席分析師王叢(Kim Wang)認為,大數據環(huán)境對系統性能要求非常苛刻,要滿(mǎn)足應用OLTP和大數據分析OLAP,以及業(yè)務(wù)關(guān)鍵型應用的低延遲需求,傳統地通過(guò)增加控制器和硬盤(pán)這一解決方式不僅帶來(lái)高昂的采購、運維成本和占地空間成本,而且還會(huì )導致資源的閑置,從而進(jìn)一步降低了企業(yè)的IT總擁有成本。EMC的MCx多核優(yōu)化并行處理技術(shù),讓用戶(hù)能更為經(jīng)濟有效地滿(mǎn)足大數據對于IOPs的需求。靈活的閃存技術(shù)選擇讓用戶(hù)滿(mǎn)足業(yè)務(wù)關(guān)鍵應用和高虛擬機密度,以及桌面虛擬化對高IOPs和低延遲的需求。同時(shí)從戰略維度來(lái)看,EMC軟件定義存儲ViPR,對異構平臺和第三方技術(shù)的整合能力和對開(kāi)源平臺的支撐,不僅實(shí)現資源配置和管理效率,同時(shí)通過(guò)管理和數據的分離,讓企業(yè)可以逐步從部署管理存儲設備向根據SLA需求動(dòng)態(tài)提供存儲服務(wù),實(shí)現自動(dòng)化提高集中統一管理的目的。