穩(wěn)若磐石的焱融 SaaS 服務(wù)平臺(tái)背后，是數(shù)據(jù)生態(tài)的崛起

時(shí)間：2023-03-14 08:48:01 | 來(lái)源：電子商務(wù)

時(shí)間：2023-03-14 08:48:01 來(lái)源：電子商務(wù)

上個(gè)月，焱融 SaaS 數(shù)據(jù)服務(wù)平臺(tái)正式發(fā)布了，作為一款簡(jiǎn)單、靈活且高可用的 NAS 共享數(shù)據(jù)服務(wù)平臺(tái)，可以說(shuō)是廣大中小企業(yè)、工程師用來(lái)輕松遷移、分析和安全地共享數(shù)據(jù)的神兵利器。

在焱融 SaaS 平臺(tái)上線(xiàn)后，收到了越來(lái)越多的關(guān)注和好評(píng)，其中有不少用戶(hù)開(kāi)始好奇焱融 SaaS 平臺(tái)背后的故事、業(yè)務(wù)邏輯和底層技術(shù)。為了滿(mǎn)足大家的好奇心，本篇文章將深挖焱融 SaaS 平臺(tái)背后的核心技術(shù)，揭秘焱融焱融 SaaS 平臺(tái)是如何為用戶(hù)提供高性能、高可用、靈活性強(qiáng)的服務(wù)和產(chǎn)品。

焱融 SaaS 平臺(tái)的誕生歷程

當(dāng)前，分布式存儲(chǔ)主要分為三大類(lèi)型：對(duì)象存儲(chǔ)、塊存儲(chǔ)和文件存儲(chǔ)。其中，無(wú)論是對(duì)歷史遺留的系統(tǒng)，還是對(duì)當(dāng)下新興的技術(shù)，諸如 AI 訓(xùn)練、容器等場(chǎng)景來(lái)說(shuō)，分布式文件存儲(chǔ)無(wú)疑是應(yīng)用范圍最廣、適配性最好的。當(dāng)然，文件存儲(chǔ)也面臨一個(gè)問(wèn)題——它是存儲(chǔ)三駕馬車(chē)中，最復(fù)雜的一種存儲(chǔ)類(lèi)型。

在混合云策略中，文件存儲(chǔ)是重要的一環(huán)，尤其是對(duì)于數(shù)據(jù)有交互需求的場(chǎng)景，是不可缺少的部分。隨著云原生概念的進(jìn)一步擴(kuò)大，用戶(hù)對(duì)于存儲(chǔ)的需求，也逐漸從原有的存儲(chǔ)數(shù)據(jù)延伸到了易部署、易用性方面，這也是國(guó)外存在著大量的 Distributed Cloud File Storage 的原因。

同時(shí)，隨著越來(lái)越多的用戶(hù)將業(yè)務(wù)向公有云上遷移，用戶(hù)在為應(yīng)用選擇存儲(chǔ)時(shí)，經(jīng)常會(huì)陷入困境。

第一，企業(yè)對(duì)于成本優(yōu)化的追求，在所有的應(yīng)用場(chǎng)景里幾乎都是孜孜不倦的，即使在最核心的應(yīng)用場(chǎng)景里，我們依然需要控制成本。第二，我們很難快速讓私有云和公有云或者不同云之間的數(shù)據(jù)，形成統(tǒng)一的整體。第三，同樣的數(shù)據(jù)在面對(duì)不同的應(yīng)用場(chǎng)景時(shí)，也會(huì)有著不同的性能和功能的訴求，僅僅依靠公有云上的存儲(chǔ)類(lèi)型是完全不夠的。

針對(duì)文件存儲(chǔ)和業(yè)務(wù)場(chǎng)景的優(yōu)勢(shì)和挑戰(zhàn)，焱融推出了SaaS 數(shù)據(jù)服務(wù)平臺(tái)——焱融 SaaS 平臺(tái)，其實(shí)現(xiàn)將 YRCloudFile 在應(yīng)對(duì)企業(yè)用戶(hù)過(guò)程中，所積累的海量存儲(chǔ)技術(shù)優(yōu)勢(shì)和實(shí)戰(zhàn)經(jīng)驗(yàn)，應(yīng)用到公有云環(huán)境中，結(jié)合分層存儲(chǔ)策略，利用云上的跨虛擬數(shù)據(jù)中心的訪(fǎng)問(wèn)能力，在滿(mǎn)足用戶(hù)對(duì)數(shù)據(jù)訪(fǎng)問(wèn)性能要求的同時(shí)，給用戶(hù)帶來(lái)成本的優(yōu)勢(shì)，也為混合云的解決方案提供了足夠的支撐能力。

焱融 SaaS 平臺(tái)技術(shù)結(jié)構(gòu)視角

從技術(shù)架構(gòu)的維度看，焱融 SaaS 平臺(tái)的部署模式沿用了企業(yè)版的標(biāo)準(zhǔn)結(jié)構(gòu)，采用了公有云上的虛擬機(jī)并配合高性能的 EBS 磁盤(pán)，例如 NVMe 高性能磁盤(pán)， 對(duì)外提供相應(yīng)的 IOPS 和帶寬。

根據(jù)業(yè)務(wù)的需要，焱融 SaaS 平臺(tái)可以使用對(duì)業(yè)務(wù)端透明的方式進(jìn)行無(wú)縫垂直擴(kuò)展，通過(guò)在單集群內(nèi)的擴(kuò)容更多的 EC2 虛擬機(jī)來(lái)增加單集群的吞吐能力。還可以通過(guò)在不同的公有云可用區(qū)域，新建更多的存儲(chǔ)集群來(lái)承載更多的業(yè)務(wù)。

從客戶(hù)的應(yīng)用層面看，我們可以利用 NFS 協(xié)議（容量型）或者 POSIX（性能型）訪(fǎng)問(wèn)業(yè)務(wù)數(shù)據(jù)，達(dá)到了按需使用、按需擴(kuò)容，無(wú)需自行組建、維護(hù)相應(yīng)的存儲(chǔ)集群。同時(shí)，利用存儲(chǔ)集群的配額（Quota），QoS 管理保證了數(shù)據(jù)的安全，避免了爭(zhēng)用。

在保證用戶(hù)訪(fǎng)問(wèn)性能的同時(shí)，焱融 SaaS 平臺(tái)還充分利用了云上的對(duì)象存儲(chǔ)能力，根據(jù)系統(tǒng)定義的策略，會(huì)主動(dòng)將冷數(shù)據(jù)轉(zhuǎn)移到 S3 對(duì)象存儲(chǔ)內(nèi)，但并不破壞用戶(hù)統(tǒng)一命名空間的訪(fǎng)問(wèn)能力。

焱融 SaaS 平臺(tái)優(yōu)化分層策略

目前，焱融 SaaS 平臺(tái)的存儲(chǔ)主要分為兩個(gè)層次：熱數(shù)據(jù)層，冷數(shù)據(jù)層。其中，集群的 EC2 的本地磁盤(pán)組成的存儲(chǔ)池為熱數(shù)據(jù)層，是經(jīng)常性訪(fǎng)問(wèn)數(shù)據(jù)的存儲(chǔ)介質(zhì)；而 S3 對(duì)象存儲(chǔ)作為冷數(shù)據(jù)層，是用于非經(jīng)常性訪(fǎng)問(wèn)數(shù)據(jù)的存儲(chǔ)介質(zhì)。從應(yīng)用層來(lái)看，所有的數(shù)據(jù)均在同一命名空間內(nèi)，數(shù)據(jù)的調(diào)度由存儲(chǔ)集群自行完成。

為了最大程度上滿(mǎn)足用戶(hù)對(duì)容量和性能的需求，焱融 SaaS 平臺(tái)針對(duì)每個(gè)客戶(hù)創(chuàng)建的文件系統(tǒng)，默認(rèn)創(chuàng)建了 Tiering Policy，可以將數(shù)據(jù)放置到對(duì)象存儲(chǔ)。由于對(duì)象存儲(chǔ)跨網(wǎng)絡(luò)訪(fǎng)問(wèn)傳輸小文件相比于大文件來(lái)說(shuō)，性?xún)r(jià)比較低，所以系統(tǒng)策略需要同時(shí)考慮文件訪(fǎng)問(wèn)時(shí)間和文件數(shù)據(jù)大小，例如對(duì)于 512Byte 的文件，不會(huì)轉(zhuǎn)移到 S3 存儲(chǔ)內(nèi)，默認(rèn)保留在熱數(shù)據(jù)層。

在持續(xù)運(yùn)行過(guò)程中，依賴(lài)于焱融 SaaS 平臺(tái)的多 MDS（文件系統(tǒng)元數(shù)據(jù)服務(wù)）能力，會(huì)對(duì)數(shù)據(jù)進(jìn)行掃描，符合策略的數(shù)據(jù)將被放置到對(duì)象存儲(chǔ)。當(dāng)某一時(shí)刻，應(yīng)用訪(fǎng)問(wèn)已經(jīng)被轉(zhuǎn)移到對(duì)象存儲(chǔ)內(nèi)的數(shù)據(jù)，將會(huì)自動(dòng)發(fā)生數(shù)據(jù)的轉(zhuǎn)移。

局部讀寫(xiě)的思路拆解

在分層策略被觸發(fā)后，部分?jǐn)?shù)據(jù)會(huì)被放置到 S3 對(duì)象存儲(chǔ)中。此時(shí)，如果業(yè)務(wù)系統(tǒng)再次訪(fǎng)問(wèn)相應(yīng)的數(shù)據(jù)，焱融 SaaS 平臺(tái)將會(huì)觸發(fā)數(shù)據(jù)下載的動(dòng)作。通常的默認(rèn)行為是，整個(gè)文件通過(guò) S3 協(xié)議全部下載，然后再用文件訪(fǎng)問(wèn)協(xié)議讀取文件返回給用戶(hù)。這個(gè)過(guò)程中，用戶(hù)能夠明顯的感受到數(shù)據(jù)的訪(fǎng)問(wèn)延遲，因?yàn)橐却龜?shù)據(jù)全部下載完成。

但根據(jù)我們?cè)诟鱾€(gè)企業(yè)環(huán)境的實(shí)測(cè)數(shù)據(jù)來(lái)分析，無(wú)論是用戶(hù)的行為，還是程序的行為，在數(shù)據(jù)獲取的過(guò)程，均存在優(yōu)化的行為。例如，觀(guān)看視頻文件，用戶(hù)常見(jiàn)的行為就是拖動(dòng)式觀(guān)看；在某些分析領(lǐng)域，也會(huì)首先讀取文件的頭部，根據(jù)頭部信息再去讀取后續(xù)的某些部分。

解決這個(gè)問(wèn)題的思路即為局部讀寫(xiě)，根據(jù)客戶(hù)程序讀寫(xiě)文件的信息，利用文件的 MDS 信息也對(duì)應(yīng)去 S3 對(duì)象存儲(chǔ)上讀寫(xiě)對(duì)應(yīng)的片段并返回給客戶(hù)，同時(shí)為了充分利用網(wǎng)絡(luò)帶寬的能力，焱融 SaaS 平臺(tái)對(duì)讀取的數(shù)據(jù)范圍會(huì)進(jìn)行對(duì)齊操作。

焱融 SaaS 平臺(tái)企業(yè)實(shí)戰(zhàn)

在企業(yè) IT 方案轉(zhuǎn)型過(guò)程中，DevOps 以及云都是關(guān)鍵的驅(qū)動(dòng)因素。根據(jù) Gartner 預(yù)測(cè)，到2021年，全球最終用戶(hù)在公有云服務(wù)上的支出將增長(zhǎng)18.4％，達(dá)到3049億美元，高于2020年的2575億美元。在 COVID-19 危機(jī)之后，轉(zhuǎn)移到云的 IT 支出比例將加速增長(zhǎng)，預(yù)計(jì)到2024年，云將占全球企業(yè) IT 總支出市場(chǎng)的14.2％，高于2020年的9.1％。

因此，在企業(yè) IT 方案云化過(guò)程中，無(wú)論是從可靠性、共享能力，還是操作便利性和維護(hù)成本的角度來(lái)看，存儲(chǔ)是至關(guān)重要的一環(huán)。通過(guò)云存儲(chǔ)的方式，企業(yè)可以實(shí)現(xiàn)從 CapEx 轉(zhuǎn)變?yōu)?OpEx 模型，無(wú)需再購(gòu)買(mǎi)大量的物理存儲(chǔ)硬件設(shè)備，只需要按需使用，即可避免了大量設(shè)備投資。

目前，焱融 SaaS 平臺(tái)提供了 NFS 以及 POSIX 的訪(fǎng)問(wèn)協(xié)議，可以廣泛對(duì)接到企業(yè) IT 中的各類(lèi)服務(wù)。在前幾篇內(nèi)容中，我們以“焱融 SaaS 平臺(tái)搭配不同應(yīng)用”的方式，充分展現(xiàn)了焱融 SaaS 平臺(tái)高可用、靈活性強(qiáng)的特性，一起來(lái)回顧一下吧！

1、 焱融 SaaS 平臺(tái)快速上手秘訣

在《一看就懂｜焱融 SaaS 數(shù)據(jù)服務(wù)平臺(tái)上手指南》中，我們清晰地描述了如何創(chuàng)建焱融 SaaS 平臺(tái)文件系統(tǒng)，教你輕松玩轉(zhuǎn)焱融 SaaS 平臺(tái)。

2、 焱融 SaaS 平臺(tái)+ WordPress

WordPress 作為全球最流行的開(kāi)源的博客和內(nèi)容管理網(wǎng)站的建站平臺(tái)，不少人會(huì)選擇它來(lái)搭建博客、企業(yè)官網(wǎng)、電商、論壇等各類(lèi)網(wǎng)站。在《從零開(kāi)始，基于焱融 SaaS 數(shù)據(jù)服務(wù)平臺(tái)搭建私有 WordPress blog》中，我們將從具體的應(yīng)用角度來(lái)詳細(xì)操作如何搭建一個(gè)私有 WordPress blog，讓你快速擁有一個(gè)“私人領(lǐng)地”。

3、 焱融 SaaS 平臺(tái)+ Cloudreve

現(xiàn)在有不少人會(huì)通過(guò)網(wǎng)盤(pán)分享和存儲(chǔ)資源，但是有限的資源已經(jīng)限制了我們的發(fā)揮。在《網(wǎng)盤(pán)數(shù)據(jù)要搬家？焱融 SaaS 數(shù)據(jù)服務(wù)平臺(tái)教你這么干》中，我們以 Cloudreve 為例，教大家如何利用焱融 SaaS 平臺(tái)提供的存儲(chǔ)，簡(jiǎn)單快速地搭建個(gè)人網(wǎng)盤(pán)，實(shí)現(xiàn)在保證數(shù)據(jù)的可靠性的同時(shí)，非常便利地將數(shù)據(jù)分享出去。

4、焱融 SaaS 平臺(tái)+Kubernetes

焱融 SaaS 平臺(tái)除了用于備份、網(wǎng)盤(pán)、文件共享等場(chǎng)景以外，還可以結(jié)合 Kubernetes，做到按需創(chuàng)建掛載來(lái)進(jìn)一步滿(mǎn)足個(gè)性化需求，趕快一起來(lái)學(xué)習(xí)一下吧！《Kubernetes + 焱融 SaaS 數(shù)據(jù)服務(wù)平臺(tái)，個(gè)性化需求支持就沒(méi)輸過(guò)！》

5、焱融 SaaS 平臺(tái)+ELK

隨著業(yè)務(wù)的快速增長(zhǎng)，每天系統(tǒng)產(chǎn)生的 log 會(huì)不斷增長(zhǎng)，這其中包含著大量有價(jià)值信息。在《一招教你通過(guò)焱融 SaaS 數(shù)據(jù)服務(wù)平臺(tái)+ELK 讓日志幫你做決策》中，我們分享了如何基于焱融 SaaS 平臺(tái)所提供的存儲(chǔ)能力，通過(guò) ELK 實(shí)時(shí)日志分享平臺(tái)搭建整體軟件結(jié)構(gòu)。

與焱融 SaaS 平臺(tái)一起，共建數(shù)據(jù)生態(tài)

目前，越來(lái)越多的用戶(hù)將企業(yè)級(jí)應(yīng)用程序，遷移和部署到公有云上，并使用基于文件的共享存儲(chǔ)。焱融科技作為文件存儲(chǔ)領(lǐng)域重要的引領(lǐng)者和創(chuàng)新者，不但擁有成熟的平臺(tái)和優(yōu)秀的技術(shù)基礎(chǔ)，還具備強(qiáng)大的市場(chǎng)需求前瞻洞察力，布局研發(fā)了業(yè)內(nèi)領(lǐng)先的數(shù)據(jù)服務(wù)平臺(tái)，希望通過(guò)焱融 SaaS 平臺(tái)給用戶(hù)帶來(lái)性能和使用上的極致體驗(yàn)。

焱融 SaaS 平臺(tái)是一款快速迭代的產(chǎn)品，需要與更多伙伴技術(shù)共生和能力融合，才能構(gòu)建起更加穩(wěn)固、繁榮的數(shù)據(jù)生態(tài)。因時(shí)而生，共創(chuàng)數(shù)據(jù)未來(lái)，我們期待更多的伙伴加入到焱融 SaaS 平臺(tái)，相信未來(lái)在焱融 SaaS 平臺(tái)上會(huì)誕生最前沿、最炫酷的創(chuàng)意和應(yīng)用。