方案簡(jiǎn)介
圖云創(chuàng)智分布式存儲(chǔ)系統(tǒng)采用全分布式設(shè)計(jì)與先進(jìn)的存儲(chǔ)虛擬化技術(shù)相結(jié)合，由多個(gè)獨(dú)立的兆芯 x86 服務(wù)器作為存儲(chǔ)節(jié)點(diǎn)，聯(lián)合道熵存儲(chǔ)軟件和思贊博微可信計(jì)算技術(shù)實(shí)現(xiàn)統(tǒng)一資源調(diào)度、縱向橫向無(wú)縫擴(kuò)展、全場(chǎng)景應(yīng)用與存儲(chǔ)接口支持、自動(dòng)化運(yùn)維管理等技術(shù)手段以滿足海量數(shù)據(jù)的存儲(chǔ)需求。
產(chǎn)品架構(gòu)
圖云創(chuàng)智分布式存儲(chǔ)系統(tǒng)主要由存儲(chǔ)層、服務(wù)支撐層、接口層三層架構(gòu)組成。圖云創(chuàng)智分布式存儲(chǔ)支持基于自研 CPU 架構(gòu)和 X86 架構(gòu)的異構(gòu)部署，支持基于固態(tài)硬盤(pán)和機(jī)械硬盤(pán)創(chuàng)建存儲(chǔ)池,支持異構(gòu)存儲(chǔ)的納管與優(yōu)化,圖云創(chuàng)智分布式存儲(chǔ)系統(tǒng)通過(guò)納管大量的存儲(chǔ)物理資源，構(gòu)成一個(gè)或者多個(gè)分布式的虛擬化存儲(chǔ)池，可提供高性能、高穩(wěn)定、高安全的塊存儲(chǔ)、文件存儲(chǔ)、對(duì)象存儲(chǔ)等統(tǒng)一存儲(chǔ)服務(wù)，并通過(guò)接口層為前端應(yīng)用提供多樣化的存儲(chǔ)協(xié)議對(duì)接。
技術(shù)路線
1.處理器:兆芯開(kāi)勝KH-40000 系列
2.硬件:兆芯4U 機(jī)架式存儲(chǔ)服務(wù)器、思贊博微可信計(jì)算模塊
3.操作系統(tǒng):centos7操作系統(tǒng)
4.基礎(chǔ)軟件:Firefox瀏覽器、MobaXtermssh軟件
5.應(yīng)用軟件:道熵分布式存儲(chǔ)管理軟件V4.0
主要特點(diǎn)
1：采用全自主創(chuàng)新架構(gòu):支持兆芯等國(guó)內(nèi)服務(wù)器平臺(tái)，支持 UOS、麒麟等國(guó)內(nèi)操作系統(tǒng)。采用全分布式冗余總體架構(gòu)，實(shí)現(xiàn)整個(gè)存儲(chǔ)系統(tǒng)可以無(wú)縫、無(wú)感地平衡擴(kuò)容至上千個(gè)存儲(chǔ)節(jié)點(diǎn)，支持 PB 級(jí)別，甚至數(shù)百 PB級(jí)別海量數(shù)據(jù)的高速存取，融合共享;
2：支持橫向擴(kuò)展和縱向擴(kuò)展雙擴(kuò)展模式:既支持增加節(jié)點(diǎn)數(shù)來(lái)增加系統(tǒng)IOPS 性能和存儲(chǔ)容量(橫向擴(kuò)展)，同時(shí)支持在節(jié)點(diǎn)內(nèi)通過(guò)增加JBOD擴(kuò)展柜和磁盤(pán)來(lái)擴(kuò)容(縱向擴(kuò)展);
3：實(shí)現(xiàn)節(jié)點(diǎn)存儲(chǔ)資源池化管理:將節(jié)點(diǎn)內(nèi)所有磁盤(pán)整合為一個(gè)統(tǒng)一的存儲(chǔ)池，數(shù)據(jù)均勻分布在所有磁盤(pán)上;具備節(jié)點(diǎn)內(nèi)RAID 保護(hù)(RAID10、RAID5、RAID6模式)和節(jié)點(diǎn)間數(shù)據(jù)塊復(fù)制的雙重?cái)?shù)據(jù)保護(hù)機(jī)制;支持N+M 糾刪碼跨節(jié)點(diǎn)數(shù)據(jù)保護(hù)機(jī)制;
4：具備在線數(shù)據(jù)完整性保護(hù)機(jī)制:即每個(gè)數(shù)據(jù)塊都有相對(duì)應(yīng)的256位數(shù)據(jù)校驗(yàn)碼;數(shù)據(jù)在讀出時(shí)，必須與校驗(yàn)碼匹配后才交付前端應(yīng)用;否則啟動(dòng)數(shù)據(jù)自修復(fù)機(jī)制，確保前端應(yīng)用數(shù)據(jù)安全。支持多種不同等級(jí)的校驗(yàn)碼:fletcher2,fletcher4,SHA-2
5：具備在線數(shù)據(jù)壓縮功能:支持以下壓縮編碼:LZ4，LZJB，GZIP1-9
6：支持磁盤(pán)數(shù)據(jù)加密:包含 aes-xts-plain64，aes-cbc-essiv:sha256，Twofish，Serpent,6.cast5-RFC，2144，cast6-RFC,2612等加密模式;
7：支持緩存 SSD分層機(jī)制: 最熱的數(shù)據(jù)，包含元數(shù)據(jù)，被自動(dòng)分配在 DRAM 中，次熱的數(shù)據(jù)，被分配在固態(tài)硬盤(pán)中。Cache內(nèi)數(shù)據(jù)替換時(shí)，采用自適應(yīng)工作負(fù)載方式動(dòng)態(tài)調(diào)整MostRecent 數(shù)據(jù)和 Most Frequent數(shù)據(jù)所占比例;
8：支持容量超分配(瘦供給):分配給用戶的容量可達(dá)到系統(tǒng)的裸存儲(chǔ)容量的5倍或以上;當(dāng)實(shí)際使用物理存儲(chǔ)空間達(dá)到80%或以上，系統(tǒng)自動(dòng)預(yù)警并提示用戶及時(shí)擴(kuò)容;
9：支持基于 Flash 寫(xiě) log加速機(jī)制:即數(shù)據(jù)在寫(xiě)入后端存儲(chǔ)池之前以 log的形式保存在 Flash中(SSD 或 NVMe)，確保掉電安全;在數(shù)據(jù)寫(xiě)入后端存儲(chǔ)池時(shí)，多個(gè)隨機(jī)寫(xiě)IO請(qǐng)求組成群(group)，依照順序方式寫(xiě)入，提升整體寫(xiě)性能;
10：支持通過(guò)磁盤(pán)遷移的方式實(shí)現(xiàn)節(jié)點(diǎn)恢復(fù):將某個(gè)受損節(jié)點(diǎn)的全部磁盤(pán)插入到某個(gè)備用節(jié)點(diǎn),上電重啟后該節(jié)點(diǎn)自動(dòng)替換損害的節(jié)點(diǎn)，無(wú)需數(shù)據(jù)重新分布或遷移;
11：QOS 指標(biāo):支持針對(duì)應(yīng)用創(chuàng)建具備不同 QoS 的存儲(chǔ)池，通過(guò)限定 IOPS、帶寬等參數(shù)，隔
絕不同應(yīng)用之間對(duì)存儲(chǔ)性能造成性能互擾;
12：按天自動(dòng)產(chǎn)生運(yùn)營(yíng)報(bào)告:包括 CPU、內(nèi)存、磁盤(pán)、IOPS、網(wǎng)絡(luò)、使用情況及延遲、運(yùn)維曲線等;并自動(dòng)通過(guò)電子郵件發(fā)送:
13：存儲(chǔ)異構(gòu):支持將外接存儲(chǔ)與X86服務(wù)器一同劃入虛擬資源池，共同用于虛擬服務(wù)器所產(chǎn)生的數(shù)據(jù)存儲(chǔ)；
14:存儲(chǔ)云平臺(tái):可對(duì)外部物理服務(wù)器/虛擬機(jī)提供多種存儲(chǔ)協(xié)議支持，包括FC、iSCSI、NFS、SAMBA、Openstack Cinder、S3 RESTful 對(duì)象存儲(chǔ)協(xié)議;支持 HDFS 協(xié)議 ;支持主流NoSql數(shù)據(jù)庫(kù)直接在分布式存儲(chǔ)中部署,包含MongoDB,Cassandra,和 Hadoop Hbase;
15:備份與遠(yuǎn)程容災(zāi):支持整個(gè)集群存儲(chǔ)中所有快設(shè)備的全備份和增量備份，可按小時(shí)/天/周月備份數(shù)據(jù);具備數(shù)據(jù)加密，壓縮，去重等高級(jí)功能;支持將數(shù)據(jù)備份到S3兼容存儲(chǔ)及亞馬遜/阿里云等共有云平臺(tái);支持集群與集群之間的同步/異步遠(yuǎn)程復(fù)制，可實(shí)現(xiàn) RTO與RPO 同時(shí)趨于零的最高級(jí)別容災(zāi)功能。
客戶收益
1.圖云創(chuàng)智分布式存儲(chǔ)提供多種存儲(chǔ)服務(wù)，包含 FC、iSCS、塊、對(duì)象、文件存儲(chǔ)等，對(duì)傳統(tǒng)關(guān)系型數(shù)據(jù)庫(kù)、非結(jié) 構(gòu)化海量數(shù)據(jù)、云計(jì)算、大數(shù)據(jù)等不同應(yīng)用場(chǎng)景提供統(tǒng)一存儲(chǔ)支撐。
2.圖云創(chuàng)智 分布式存儲(chǔ)具備極其強(qiáng)大的容災(zāi)抗毀能力。強(qiáng)一致性分布 式設(shè)計(jì)確保在斷電、斷網(wǎng)、服務(wù)器硬件故障、磁盤(pán)損壞等多種(甚至 極端)故障模式下，數(shù)據(jù)仍然能保持一致性。此外，圖云創(chuàng)智分布式存儲(chǔ)系統(tǒng)還具備完善的數(shù)據(jù)完整性保 護(hù)策略，以及 PB 級(jí)別的持續(xù)增量數(shù)據(jù)備份措施。
3.圖云創(chuàng)智 分布式存儲(chǔ)還具備極高的安全防護(hù)機(jī)制，建立了零信任框架，通過(guò)執(zhí)行最小權(quán)限原則，防止惡意獲取數(shù)據(jù)的發(fā)生。
應(yīng)用場(chǎng)景
圖云創(chuàng)智分布式存儲(chǔ)系統(tǒng)方案適用于各種需要大規(guī)模、高性能數(shù)據(jù)存儲(chǔ)的場(chǎng)景，如互聯(lián)網(wǎng)公司、云計(jì)算平臺(tái)、大數(shù)據(jù)分析、視頻存儲(chǔ)等。它可以滿足非結(jié)構(gòu)化數(shù)據(jù)(如文本、圖片、音頻等)和結(jié)構(gòu)化數(shù)據(jù)(如數(shù)據(jù)庫(kù)表)的存儲(chǔ)需求，為用戶提供高效、穩(wěn)定的數(shù)據(jù)存儲(chǔ)服務(wù)。
點(diǎn)擊咨詢