摩根大通和數(shù)據(jù)網(wǎng)格之旅
時(shí)間:2022-03-05 04:34:02 | 來源:行業(yè)動(dòng)態(tài)
時(shí)間:2022-03-05 04:34:02 來源:行業(yè)動(dòng)態(tài)
上周,我們饒有興趣地觀察到一個(gè)來自摩根大通的團(tuán)隊(duì)舉辦了一個(gè)會(huì)議,會(huì)議的議題是通過數(shù)據(jù)網(wǎng)格架構(gòu)的數(shù)據(jù)湖戰(zhàn)略。我們看到了這個(gè)標(biāo)題,然后想,這個(gè)題目真的很奇怪。我們想知道他們是不是只是使用了舊有的數(shù)據(jù)湖,然后宣稱自己現(xiàn)在已經(jīng)轉(zhuǎn)變成數(shù)據(jù)網(wǎng)格了?
但是在我們聽了演講之后,發(fā)現(xiàn)答案是明確的不,完全不是這樣。一位名為Scott Hirleman的紳士組織了這場(chǎng)會(huì)議,有三位摩根大通的發(fā)言人進(jìn)行了發(fā)言,如上圖所示,他們是:部門首席信息官James Reid、技術(shù)專家及架構(gòu)師Arup Nanda以及信息架構(gòu)師Sarita Bakst。
這是我們見過的最詳細(xì)也是最實(shí)用的關(guān)于數(shù)據(jù)網(wǎng)格實(shí)現(xiàn)的討論。而且這是摩根大通。我們知道該公司是Hadoop早期采用者,這是一家非常精通技術(shù)的公司,這家巨無霸級(jí)別的公司在過去的十年里,在全公司范圍內(nèi)為了數(shù)據(jù)投資了大約數(shù)十億美元。我們很高興地看到,這家公司并沒有糾結(jié)于過去在大數(shù)據(jù)方面的得失,而是在努力地尋找方法進(jìn)行改進(jìn),并且擁抱了數(shù)據(jù)網(wǎng)格的新思想。
在本文中,我們將分享一些他們使用的幻燈片,并且按照我們的理解,評(píng)價(jià)這些內(nèi)容是如何與數(shù)據(jù)網(wǎng)格的概念相契合的,我們還會(huì)略微深入一些介紹摩根大通正在使用的一些工具,特別是圍繞著亞馬遜網(wǎng)絡(luò)服務(wù)云的工具。