云上數(shù)據(jù)分析下一站Serverless
時間:2022-04-07 07:33:02 | 來源:行業(yè)動態(tài)
時間:2022-04-07 07:33:02 來源:行業(yè)動態(tài)
目前,將數(shù)據(jù)向云上遷移是企業(yè)持續(xù)在做的一件事,借助云上提供的數(shù)據(jù)存儲、調(diào)用、開發(fā)、分析等功能可以更好地滿足企業(yè)的數(shù)據(jù)分析、挖掘需求。
亞馬遜云科技則可以提供這一攬子的服務(wù),經(jīng)過多年的技術(shù)演進,現(xiàn)在亞馬遜云科技不但可以向企業(yè)提供數(shù)據(jù)分析的底層環(huán)境、算力調(diào)度、數(shù)據(jù)存儲、環(huán)境配置、開發(fā)工具等等一系列數(shù)據(jù)分析基礎(chǔ)設(shè)施,還基于自身技術(shù)實踐積累,提供了Amazon Redshift數(shù)據(jù)倉庫、Amazon EMR大數(shù)據(jù)分析服務(wù)、Amazon Kinesis流式數(shù)據(jù)處理框架,Amazon OpenSearch Service日志分析工具等。
與此同時亞馬遜還將Serverless的理念帶進了數(shù)據(jù)分析領(lǐng)域,用戶在安全便捷進行數(shù)據(jù)分析的同時,無需配置資源,可以自由調(diào)度功能模塊,讓云上數(shù)據(jù)分析變得更加容易。
例如在低配置的終端上進行代碼編寫,在編寫完數(shù)據(jù)處理與模型訓練代碼后,可以直接調(diào)用一個分布式計算任務(wù),急速的完成數(shù)據(jù)處理與模型訓練,任務(wù)結(jié)束后,資源就可以立刻釋放,不造成一點浪費。換一個玩游戲的比喻就是,想玩3A(高成本、高體量、高質(zhì)量的游戲)大作時,又不想買3080Ti顯卡,如果使用一張serverless的顯卡,只需要在游戲啟動時付一些費用,就能獲得游戲本身的計算量和靈活彈性的算力,關(guān)閉游戲時顯卡就可以自動收回。
隨著亞馬遜云科技的技術(shù)創(chuàng)新,云上的數(shù)據(jù)分析也已經(jīng)進入了Serverless階段。當企業(yè)需要對海量數(shù)據(jù)進行深度挖掘、分析時,只需要三步,編寫數(shù)據(jù)分析代碼、提交任務(wù)(工作流)、debug任務(wù)(工作流),就可以啟動運算流程、獲得結(jié)果。
在這種極簡風使用大數(shù)據(jù)的背后,是技術(shù)的成熟與強大的技術(shù)封裝能力。如今,亞馬遜云科技已經(jīng)擁有100多種服務(wù)來支持任何數(shù)據(jù)湖用例,而且更多的無服務(wù)器就地查詢與處理選項,可縮短獲得結(jié)果的時間并降低數(shù)據(jù)洞察的成本。