文章內(nèi)容

Hadoop必將風(fēng)靡2012年的六個(gè)理由

發(fā)布時(shí)間: 2012/7/28 9:40:14

毫無疑問，Hadoop已經(jīng)贏得了大量投資者和IT媒體的青睞，但卻很少看到任何的實(shí)際產(chǎn)出。即將過去的2011是風(fēng)暴來襲前的準(zhǔn)備階段，為很多新公司新用戶建立了一個(gè)海量數(shù)據(jù)的分析平臺(tái)。就連微軟這樣的互聯(lián)網(wǎng)巨頭都已放棄其他平臺(tái)而選擇Hadoop，看來Hadoop風(fēng)暴來襲已指日可待。

2012年，Hadoop必將風(fēng)靡世界。以下是六個(gè)具體的理由：

1.投資者看好Hadoop

目前，投資者十分看好Hadoop，并開始紛紛投資相關(guān)技術(shù)。從分布式層面上來說，Hadoop開源軟件整體方案供應(yīng)商Cloudera已獲得7600萬美元投資，分布式架構(gòu)新成員MapR和Hortonworks分別融資2900萬美元和5000萬美元；而從棧的層面上來看，Hadoop海量數(shù)據(jù)分析平臺(tái)Datameer、 Karmasphere和Hadapt已分別獲得了1000萬美元左右投資。大量專注這一技術(shù)的初創(chuàng)公司（如Zettaset、Odiago和Platfora等）更是如雨后春筍般迅速涌現(xiàn)。另外，投資機(jī)構(gòu)Accel Partners最近還成立了一個(gè)總額為1億美金的大型數(shù)據(jù)基金，專門用于投資基于Hadoop和其他核心大型數(shù)據(jù)技術(shù)的應(yīng)用。

2.競(jìng)爭(zhēng)孕育成功

Hadoop必將是未來的發(fā)展趨勢(shì)，尤其是當(dāng)涉及到集成管理等業(yè)務(wù)問題時(shí)。Hadoop也是Cloudera、MapR和Hortonworks能在贏取客戶資源方面具有明顯競(jìng)爭(zhēng)優(yōu)勢(shì)的原因。

3.學(xué)習(xí)曲線

除了改善在分布式層面的管理和支持能力外，Cloudera、MapR和Hortonworks等公司已經(jīng)開始著手提高Hadoop的易用性。同時(shí)，Karmasphere和Concurrent公司也已開始提供編寫Hadoop流程和應(yīng)用服務(wù)，而Datameer和IBM等公司正在努力將Hadoop普及到普通商業(yè)用戶。隨著越來越多的Hapdoop創(chuàng)業(yè)公司涌現(xiàn)，通過各種創(chuàng)新方法簡(jiǎn)化繁重的數(shù)據(jù)分析工作也將變得越來越常見。

4.用戶是永遠(yuǎn)的黃金準(zhǔn)則

懂得任何管理Hadoop集群和編寫Hadoop應(yīng)用是一回事，而將它有效地用于實(shí)際的分析管理卻是另外一回事。在Hadoop World大會(huì)和網(wǎng)絡(luò)博客上經(jīng)�？梢钥吹絎alt Disney、Orbitz、LinkedIn、和Etsy等很多大公司通過講述自己的親身實(shí)踐大贊Hadoop。用戶口碑永遠(yuǎn)是最有效的宣傳途徑。這些大用戶的“親身試法”，對(duì)很多潛在用戶來說是一種無形的鼓勵(lì)，也能在一定程度上幫助他們認(rèn)識(shí)“從何開始、去往何處”的問題。

5.無處不在的用武之地

像Oracle、MySQL和SQL Server等老牌數(shù)據(jù)庫一樣，雖然人們對(duì)此了解不多也不深，且容易被忽視，但它們無處不在，幾乎所有人都聽過。從長(zhǎng)遠(yuǎn)來看，Hadoop也將發(fā)展到類似階段。一旦遇到涉及大量非結(jié)構(gòu)化的數(shù)據(jù)采集和處理時(shí)，Hadoop就有了用武之地。

6.內(nèi)容多，功能強(qiáng)大

除了核心設(shè)計(jì)思想MapReduce和HDFS（Hadoop Distributed File System）外，Hadoop還包括了從類SQL查詢語言HQL，到NoSQL HBase數(shù)據(jù)庫，以及機(jī)器學(xué)習(xí)庫Mahout等內(nèi)容。Cloudera、Hortonworks和MapR都已在他們的分布式系統(tǒng)中加入了Hadoop項(xiàng)目。最近，Cloudera還成立一個(gè)名為Bigtop的項(xiàng)目，集成了所有Hadoop相關(guān)項(xiàng)目。作為一個(gè)幕后英雄，Hadoop未來必將應(yīng)用于越來越多的領(lǐng)域，風(fēng)靡全球。