大數(shù)據(jù)時(shí)代到來(lái)
隨著信息化技術(shù)的不斷發(fā)展，數(shù)字化現(xiàn)在已經(jīng)深深的滲透進(jìn)了我們生活中的點(diǎn)點(diǎn)滴滴。生活在Web 2.0 時(shí)代的我們，已經(jīng)不僅僅是一個(gè)信息的被動(dòng)接受者，同時(shí)還是一個(gè)信息的創(chuàng)造者。全球每秒鐘發(fā)送 290萬(wàn)封電子郵件；Twitter上每天發(fā)布 5 千萬(wàn)條消息；每天亞馬遜上將產(chǎn)生 630萬(wàn)筆訂單；每個(gè)月網(wǎng)民在Facebook 上要花費(fèi)7 千億分鐘；一個(gè)8Mbps（兆比特每秒）的攝像頭一小時(shí)能產(chǎn)生3.6GB數(shù)據(jù)，一個(gè)城市若安裝幾十萬(wàn)個(gè)交通和安防攝像頭，每月產(chǎn)生的數(shù)據(jù)量將達(dá)幾十PB；一個(gè)病人的CT影像數(shù)據(jù)量達(dá)幾十GB，而全國(guó)每年門(mén)診人數(shù)以數(shù)十億計(jì)，并且他們的信息需要長(zhǎng)時(shí)間保存。總之，大數(shù)據(jù)存在于各行各業(yè)，一個(gè)大數(shù)據(jù)時(shí)代正在到來(lái)。
由于數(shù)據(jù)產(chǎn)生成本急速下降，人類(lèi)產(chǎn)生的數(shù)據(jù)量正在呈指數(shù)級(jí)增長(zhǎng)，而大量新數(shù)據(jù)源的出現(xiàn)則導(dǎo)致了非結(jié)構(gòu)化、半結(jié)構(gòu)化數(shù)據(jù)爆發(fā)式的增長(zhǎng)，數(shù)據(jù)的結(jié)構(gòu)正在日趨復(fù)雜。全球在2010 年正式進(jìn)入ZB 時(shí)代，根據(jù)IDC監(jiān)測(cè)，全球數(shù)據(jù)量大約每?jī)赡攴环A(yù)計(jì)到2020 年，全球?qū)⒖偣矒碛?0ZB 的數(shù)據(jù)量，相較于2009 年，數(shù)據(jù)量將增長(zhǎng)近50倍。我們正處于大數(shù)據(jù)時(shí)代的邊緣。
CIO們遇到的挑戰(zhàn)
新生代客戶(hù)群的需求推動(dòng)企業(yè)業(yè)務(wù)面臨轉(zhuǎn)型挑戰(zhàn)，驅(qū)動(dòng)企業(yè)IT基礎(chǔ)設(shè)施變革適應(yīng)大數(shù)據(jù)時(shí)代要求。影響企業(yè)命脈的，永遠(yuǎn)都是客戶(hù)需求。新生代客戶(hù)手持Post-PC，除了工資以外使用各種投資方式積累財(cái)富，每天關(guān)注微博，在社交網(wǎng)站中維系人際關(guān)系，青睞網(wǎng)購(gòu)，要求享受自由的、共享的、娛樂(lè)的、完美的信息生活。這個(gè)過(guò)程將產(chǎn)生大量數(shù)據(jù)，這些ZB級(jí)的數(shù)據(jù)管理和數(shù)據(jù)分析，將不是傳統(tǒng)的IT服務(wù)器、磁帶、縱向擴(kuò)展設(shè)備能夠承載的。
世界經(jīng)濟(jì)形勢(shì)趨緊，高額的IT預(yù)算，究竟應(yīng)該在哪里投入？據(jù)調(diào)查，企業(yè)目前73％的預(yù)算都用在基本業(yè)務(wù)運(yùn)轉(zhuǎn)上，剩下的27%才對(duì)商業(yè)運(yùn)營(yíng)有支撐作用。CIO的難處在于IT設(shè)施不斷的膨脹，僅僅是因?yàn)闃I(yè)務(wù)的數(shù)量漲了，但是沒(méi)有給企業(yè)經(jīng)營(yíng)帶來(lái)真正的增值。值得注意的，未來(lái)一到兩年，70％的客戶(hù)都將部署私有云，當(dāng)大數(shù)據(jù)遇到云，會(huì)同時(shí)對(duì)私有云架構(gòu)提出要求和挑戰(zhàn)。同時(shí)公有云會(huì)繼續(xù)擴(kuò)張和蔓延，催生新型企業(yè)和新型業(yè)務(wù)。另外值得探討的是，為了應(yīng)對(duì)“大數(shù)據(jù)”浪潮，很多企業(yè)在具備一定結(jié)構(gòu)化處理能力的基礎(chǔ)上，將85％以上非結(jié)構(gòu)化數(shù)據(jù)依托給了Hadoop，隨著對(duì)Hadoop的深入探索，有投資人給出這樣的感受——使用Hadoop構(gòu)建分析性查詢(xún)，會(huì)變成類(lèi)似用錘子來(lái)建造房屋的活動(dòng)，不是不可能，但是會(huì)帶來(lái)不必要的痛苦和可笑的低效成本。主要的痛點(diǎn)在于：
- Hadoop適合處理流水線任務(wù)，但是對(duì)于特定的數(shù)據(jù)模式分析任務(wù)性能極低；
- Hadoop的前期投入低廉，但是后期開(kāi)發(fā)成本和維護(hù)成本非常昂貴；
- Hadoop導(dǎo)致企業(yè)信息孤島；
- Hadoop的數(shù)據(jù)容易產(chǎn)生單點(diǎn)故障。
華為大數(shù)據(jù)解決之道：應(yīng)需而變，融易致遠(yuǎn)
大數(shù)據(jù)時(shí)代，華為推出了“三位一體”的大數(shù)據(jù)解決方案：N9000存儲(chǔ)系統(tǒng)。N9000以“應(yīng)需而變，融易致遠(yuǎn)”的理念幫助客戶(hù)從容應(yīng)對(duì)大數(shù)據(jù)的挑戰(zhàn)。
圖1：“三位一體”示意圖
N9000是在一個(gè)系統(tǒng)內(nèi)融合數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)分析和數(shù)據(jù)歸檔，三種功能集于一體。具有以下特點(diǎn)：它能解決信息孤島，用統(tǒng)一的并行任務(wù)調(diào)度框架支撐結(jié)構(gòu)化、非結(jié)構(gòu)化海量數(shù)據(jù)清洗、數(shù)據(jù)分析；通過(guò)對(duì)海量數(shù)據(jù)的生命周期管理，支持歷史數(shù)據(jù)的歸檔、壓縮、下電策略；基于海量非結(jié)構(gòu)化數(shù)據(jù)的內(nèi)容感知（元數(shù)據(jù)管理），建立海量非結(jié)構(gòu)化數(shù)據(jù)的搜索引擎，加速熱點(diǎn)數(shù)據(jù)的快速訪問(wèn)；并且其彈性空間能夠支持初始低配置，隨著客戶(hù)業(yè)務(wù)的發(fā)展，容量和性能可以隨需擴(kuò)展，并實(shí)現(xiàn)性能線性增長(zhǎng)，保護(hù)客戶(hù)初始投資，降低TCO。
華為以業(yè)界領(lǐng)先的性能、大規(guī)模橫向擴(kuò)展能力和超大單一文件系統(tǒng)為用戶(hù)提供結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)共享資源池、基于數(shù)據(jù)全生命周期管理的存儲(chǔ)與歸檔解決方案，充分切合廣電媒體、高性能計(jì)算、地質(zhì)能源、數(shù)據(jù)中心存儲(chǔ)、互聯(lián)網(wǎng)運(yùn)營(yíng)等多種大數(shù)據(jù)業(yè)務(wù)應(yīng)用的需求，幫助客戶(hù)輕松應(yīng)對(duì)大數(shù)據(jù)挑戰(zhàn)。
