1.1 高吞吐性
時間:2022-03-05 00:34:01 | 來源:行業(yè)動態(tài)
時間:2022-03-05 00:34:01 來源:行業(yè)動態(tài)
OSS的底層存儲充分利用各組件的性能優(yōu)勢,來使整個集群可以達到較高的吞吐量。
HBase(Hadoop Database),是一個高可靠性、高性能、面向列、可伸縮的分布式存儲系統(tǒng),利用HBase技術(shù)可在廉價PCServer上搭建起大規(guī)模結(jié)構(gòu)化存儲集群。對于小于1MB的文件寫入HBase是一個很棒的設(shè)計。
那么大于1MB的文件,我們存入哪里呢?有這么幾種方案可供我們選擇,比如Hadoop,F(xiàn)astDFS,Ceph等組件。我們最終選擇了Ceph做大文件存儲。
Ceph是一種為優(yōu)秀的性能、可靠性和可擴展性而設(shè)計的統(tǒng)一的、分布式文件系統(tǒng)。Ceph的開發(fā)目標可以簡單定義為以下三項:
1.可輕松擴展到數(shù)PB容量
2. 支持多種工作負載的高性能
3. 高可靠性