一次完整的回滾流程
時間：2022-04-30 15:45:02 | 來源：行業(yè)動態(tài)
時間：2022-04-30 15:45:02 來源：行業(yè)動態(tài)
整個回滾流程由調(diào)度模塊Chrono進行控制。當用戶指定了一個回滾時間點，Chrono首先通過查詢Granu元數(shù)據(jù)確認該目標點數(shù)據(jù)命中的位置。命中位置只有兩種情況，一種是目標點數(shù)據(jù)還在Front接入層，尚未被Shuffle推送至Arker容量存儲層，另一種是已經(jīng)被Shuffle推送至Arker容量存儲層。
如果是第一種情況，Chrono會命令Shuffle主動拉取這部分數(shù)據(jù)至Arker容量存儲層。在確認目標點數(shù)據(jù)已經(jīng)在Arker容量存儲層后，Chrono會查詢獲取到所有需要合并的Granu以及需要合并到哪個seq_num，并分發(fā)合并任務至所有Arker。Arker容量存儲層會對這些Granu進行合并，對于一個合并任務，會首先進行索引合并，隨后會根據(jù)已經(jīng)合并完成的索引進行數(shù)據(jù)合并，合并完成后最終會生成一份新版本的BASE，這就是恢復后的全量數(shù)據(jù)。在得到恢復后的全量數(shù)據(jù)后，再將數(shù)據(jù)寫回到UDisk集群中。
我們可以看到，數(shù)據(jù)合并階段是以shard為單位并發(fā)進行的，能利用到所有容量層磁盤的IO能力；數(shù)據(jù)回吐UDisk階段，也利用了方舟和UDisk都是分布式存儲，可以采取分片并發(fā)對拷的方式將數(shù)據(jù)寫入到UDisk集群。因此恢復的RTO也能得到保證，1TB的數(shù)據(jù)恢復時間通常在30min以內(nèi)。
在線咨詢