国产成人精品无码青草_亚洲国产美女精品久久久久∴_欧美人与鲁交大毛片免费_国产果冻豆传媒麻婆精东

18143453325 在線咨詢 在線咨詢
18143453325 在線咨詢
所在位置: 首頁 > 營銷資訊 > 行業(yè)動態(tài) > 問:Spark從何而來?Spark相比于Hadoop MapReduce設(shè)計上有什么樣的優(yōu)勢?

問:Spark從何而來?Spark相比于Hadoop MapReduce設(shè)計上有什么樣的優(yōu)勢?

時間:2022-02-20 16:12:01 | 來源:行業(yè)動態(tài)

時間:2022-02-20 16:12:01 來源:行業(yè)動態(tài)

其實Spark出現(xiàn)就是為了解決上面的問題。先說一些Spark的起源,它來自 2010年Berkeley AMPLab,發(fā)表在HotCloud上的Spark是一個從學(xué)術(shù)界到工業(yè)界的成功典范,也吸引了頂級VC Andreessen Horowitz的注資。在2013年,這些大牛(包括Berkeley系主任,MIT最年輕的助理教授)從Berkeley AMPLab出去成立了Databricks,引無數(shù)Hadoop大佬盡折腰。

Spark是用函數(shù)式語言Scala編寫的,Spark簡單說就是內(nèi)存計算(包含迭代式計算、DAG計算、流式計算 )框架。之前MapReduce因效率低下,經(jīng)常被大家詬病,而Spark的出現(xiàn)讓大家感覺很清新。 Reynod 作為Spark核心開發(fā)者,介紹說Spark性能超Hadoop百倍,算法實現(xiàn)僅有其1/10或1/100。在去年的Sort benchmark上,Spark用了23min跑完了100TB的排序,刷新了之前Hadoop保持的世界紀(jì)錄。

關(guān)鍵詞:設(shè)計,優(yōu)勢

74
73
25
news

版權(quán)所有? 億企邦 1997-2022 保留一切法律許可權(quán)利。

為了最佳展示效果,本站不支持IE9及以下版本的瀏覽器,建議您使用谷歌Chrome瀏覽器。 點擊下載Chrome瀏覽器
關(guān)閉