進(jìn)入微秒時(shí)代,華為云有哪些黑科技?
時(shí)間:2022-03-20 13:00:01 | 來源:行業(yè)動(dòng)態(tài)
時(shí)間:2022-03-20 13:00:01 來源:行業(yè)動(dòng)態(tài)
在數(shù)據(jù)中心里面,影響數(shù)據(jù)時(shí)延的原因主要來自兩個(gè)層面,一個(gè)是經(jīng)過整個(gè)網(wǎng)絡(luò)傳輸時(shí)延,一個(gè)是存儲本身介質(zhì)的時(shí)延。目前這兩個(gè)層面的時(shí)延都是毫秒級,這樣情況下的5G應(yīng)用、自動(dòng)駕駛、AI等應(yīng)用很難做到實(shí)時(shí)處理,如果要進(jìn)入微秒時(shí)代,必須把這兩段時(shí)延的瓶頸都打破。
張宇昕分享了華為云解決數(shù)據(jù)實(shí)時(shí)處理難題的黑科技。
張宇昕表示,首先,為了實(shí)現(xiàn)這最后一公里的百微秒級突破,平均時(shí)延達(dá)4毫秒的機(jī)械硬盤(7200轉(zhuǎn))成為了第一個(gè)被優(yōu)化的對象。相比機(jī)械硬盤,F(xiàn)lash介質(zhì)具有更強(qiáng)的性能和20s的極低時(shí)延。同時(shí)華為云圍繞介質(zhì)上的能力,全新設(shè)計(jì)了先進(jìn)的存儲引擎,既充分釋放介質(zhì)的能力,降低時(shí)延和提升性能,又提高了存儲介質(zhì)的可靠性和增強(qiáng)了使用壽命。
第二,我們通過軟硬件架構(gòu)和數(shù)據(jù)中心架構(gòu)的優(yōu)化,實(shí)現(xiàn)了極簡網(wǎng)絡(luò),也實(shí)現(xiàn)了多核免鎖并發(fā),使得軟件的時(shí)延和網(wǎng)絡(luò)的時(shí)延也降到了極低,所以整個(gè)數(shù)據(jù)處理IO從進(jìn)來到出去,我們能實(shí)現(xiàn)50s -100s的穩(wěn)定時(shí)延。 張宇昕談到。
第三,華為公司有一個(gè)很強(qiáng)的優(yōu)勢就是芯片,目前全系列自研芯片從算、傳、存、智四個(gè)維度來增強(qiáng)數(shù)據(jù)處理全流程。芯片與架構(gòu)的緊密配合,充分發(fā)揮了鯤鵬CPU在多核、低功耗等方面的優(yōu)勢;通過高性能智能網(wǎng)卡芯片、SSD存儲控制芯片實(shí)現(xiàn)了數(shù)據(jù)的直接訪問;結(jié)合昇騰AI芯片,讓全棧軟硬件聯(lián)動(dòng)創(chuàng)新,并首次實(shí)現(xiàn)云存儲在芯片級的深度定制優(yōu)化;實(shí)現(xiàn)通過網(wǎng)絡(luò)芯片和SSD 存儲卡控制芯片,把整個(gè)IO路徑重構(gòu),做到極低時(shí)延。
當(dāng)然說了這么多,個(gè)人第一感覺還是算法的重要性,不管是控制器、軟件也好,芯片也好,里面很多核心技術(shù)其實(shí)都涉及算法,算法需要長期的積累,才能不斷地逼近能力極限。華為云的優(yōu)勢就是把這些能力綜合起來,做到了數(shù)據(jù)的實(shí)時(shí)處理。