01 被仰望的

時(shí)間：2022-04-19 14:27:01 | 來(lái)源：行業(yè)動(dòng)態(tài)

時(shí)間：2022-04-19 14:27:01 來(lái)源：行業(yè)動(dòng)態(tài)

Cloudera的故事要從Hadoop開(kāi)始說(shuō)，而說(shuō)Hadoop就離不開(kāi)Doug Cutting。

Doug Cutting現(xiàn)在是Apache基金會(huì)的主席，標(biāo)準(zhǔn)的大神。在我心目中，他和谷歌AI負(fù)責(zé)人Jeff Dean、Linux之父Linus并稱三大天王，高山仰止，令我自慚形穢，最終放棄編程。

2004年，Doug Cutting正在搗鼓Nutch，Nutch是一個(gè)開(kāi)源搜索引擎，關(guān)于它和Lucene的故事又是一個(gè)傳奇，可以再開(kāi)一篇單獨(dú)講?？傊?，Doug Cutting碰到了一些大規(guī)模索引和分布式計(jì)算的問(wèn)題，恰好這時(shí)看到谷歌發(fā)表的兩篇論文里有相似場(chǎng)景及解決方案。仔細(xì)研究之后，他覺(jué)得非常有道理，于是很快就把論文里的技術(shù)實(shí)現(xiàn)了，包括一個(gè)分布式計(jì)算框架MapReduce和一個(gè)分布式存儲(chǔ)系統(tǒng)HDFS，然后放進(jìn)了自己的Nutch里。

2006年，Doug Cutting預(yù)感到這種數(shù)據(jù)處理技術(shù)有著更大的潛力，便把MapReduce和HDFS從Nutch中獨(dú)立出來(lái)，合成一個(gè)后開(kāi)源了，取名為Hadoop。那會(huì)他兒子剛好兩歲，不大會(huì)講話，總管自己的玩具象叫Hadopp，Doug Cutting靈機(jī)一動(dòng)，便把這個(gè)名字拿了過(guò)來(lái)。

同年，為了進(jìn)一步發(fā)展Hadoop，Doug Cutting決定加入互聯(lián)網(wǎng)公司里最大的雅虎。

大概他也沒(méi)想到，大數(shù)據(jù)時(shí)代的序幕就這樣被拉開(kāi)了。

在雅虎，Hadoop的集群規(guī)模很快過(guò)千，Doug Cutting也認(rèn)識(shí)了雅虎副總裁Amr Awadallah。

為了對(duì)抗日漸崛起的谷歌，Amr當(dāng)時(shí)正在研究如何讓雅虎搜索更智能，也碰到很多性能、成本與彈性的問(wèn)題。在Doug Cutting的建議下，他開(kāi)始嘗試Hadoop。在隨后的兩年里，Amr基于Hadoop改造了之前的數(shù)據(jù)處理系統(tǒng)，結(jié)果可以說(shuō)是驚人的好完成相同的工作，新系統(tǒng)成本不過(guò)是之前的十分一，更重要的，他們還能做之前根本無(wú)法想象的事情，比如全量分析以PB記的數(shù)據(jù)。

這讓Amr大為驚喜，他進(jìn)一步想，這些問(wèn)題應(yīng)該不止雅虎會(huì)碰到，Hadoop這種革命性的數(shù)據(jù)處理能力里蘊(yùn)含著巨大商機(jī)。于是他萌生了一種想法，創(chuàng)業(yè)。這并不是Amr的第一次創(chuàng)業(yè)，實(shí)際上他在很早之前就創(chuàng)立了一家叫做VivaSmart的公司，然后2000年公司被雅虎收購(gòu)，他才隨之加入雅虎。

Amr召集起幾個(gè)志同道合的人，包括兩位分別來(lái)自谷歌和Facebook的工程師和一位來(lái)自O(shè)racle的經(jīng)理人Mike Olson，很快在硅谷成立了一家公司，自己擔(dān)任CTO。

公司的名字叫Cloudera，CEO是Mike Olson。

Mike Olson何許人也？其實(shí)他和Amr一樣，也是自己的公司被收購(gòu)后加入大公司的。在Oracle之前，他曾是Sleepycat的CEO，而在Sleepycat之前，他又參與過(guò)IIIustra的創(chuàng)業(yè)。這兩家都是在開(kāi)源軟件上創(chuàng)業(yè)的商業(yè)公司，Sleepycat基于Berkeley DB，IIIustra基于PostgreSQL。這幾乎和他們要做的Cloudera一模一樣。

那時(shí)是2008年，Hadoop正以燎原之勢(shì)蔓延，不僅席卷了硅谷，也燃燒到了大洋彼岸的淘寶和百度等，于是很快就成了Apache的頂級(jí)項(xiàng)目。

一年后，Doug Cutting加入Cloudera，職位是首席架構(gòu)師，而作為Hadoop的創(chuàng)始人，他也很快被選為Apache基金會(huì)主席。

天時(shí)、地利、人和，獨(dú)角獸的羽翼鼓漲滿滿，只等風(fēng)來(lái)。

2009年，Cloudera拿到了500萬(wàn)美金的第一筆投資，2011年，拿到了4000萬(wàn)美金的第二筆，三年之后，它又拿到了高達(dá)9億美金的第三筆。

如果那時(shí)你搜索Hadoop is，輸入欄會(huì)自動(dòng)補(bǔ)齊 future。

我記得那時(shí)我大學(xué)快畢業(yè)。有次看到班里一個(gè)同學(xué)正坐在電腦前賤兮兮的笑，我問(wèn)他在干啥，他說(shuō)在改簡(jiǎn)歷，我更加好奇便湊了過(guò)去，只見(jiàn)他正把一段網(wǎng)上復(fù)制的內(nèi)容貼到技能那一欄里去。我不解，他咔咔使勁按了幾下Control S后嘻嘻道，現(xiàn)在流行云計(jì)算，只要描述里出現(xiàn)Hadoop，肯定能過(guò)簡(jiǎn)歷關(guān)。

而且經(jīng)過(guò)實(shí)踐，這是真的。Hadoop受歡迎的夸張程度，可見(jiàn)一斑。

另外，估計(jì)那會(huì)大家都分不清什么是云計(jì)算哪個(gè)是大數(shù)據(jù)，不僅我分不清，你看阿里云早期的飛天系統(tǒng)，其實(shí)也是一個(gè)大數(shù)據(jù)處理工具，而且可能Cloudera也分不清，不然怎么他一個(gè)搞Hadoop的公司，起名叫Cloudera呢？

這邊Hadoop野蠻生長(zhǎng)，那邊Cloudera合縱連橫，先是和Oracle達(dá)成戰(zhàn)略合作，接著戴爾、Intel、埃森哲、德勤、MasterCard、SAP、TeraData、微軟等也紛紛入局。

所有人都關(guān)注著它，生怕錯(cuò)過(guò)什么。

2013年的時(shí)候，Mike Olson信心十足的寫(xiě)下了《The Cloudera Model》一文，表示Cloudera已經(jīng)找到了Hadoop上成功的商業(yè)模式。

那時(shí)的Cloudera，可以說(shuō)是大數(shù)據(jù)領(lǐng)域最耀眼的星。2015年華爾街日?qǐng)?bào)做了一個(gè)獨(dú)角獸排名，它是唯一上榜的大數(shù)據(jù)公司，排名21，比大眾點(diǎn)評(píng)還高。

2017年，Cloudera成功上市。