omniture

浪潮云海超融合一體機(jī)提升存儲(chǔ)性能 支撐關(guān)鍵業(yè)務(wù)高效運(yùn)行

2022-10-19 15:28 4864

北京2022年10月19日 /美通社/ -- 作為一種軟硬一體化的基礎(chǔ)設(shè)施架構(gòu),超融合具備易運(yùn)維、易部署等優(yōu)勢(shì),在多種行業(yè)與場(chǎng)景中得到了廣泛應(yīng)用。在金融、醫(yī)療等行業(yè)的部署中,面向數(shù)據(jù)庫(kù)等場(chǎng)景的超融合一體機(jī)面臨著巨大的存儲(chǔ)性能挑戰(zhàn),用戶需要提升數(shù)據(jù)吞吐能力并降低時(shí)延,以支撐關(guān)鍵型業(yè)務(wù)的高效運(yùn)行。

為提升存儲(chǔ)子系統(tǒng)的性能,浪潮使用了存儲(chǔ)性能開發(fā)套件(SPDK),并通過(guò)NVMe over Fabrics(NVMe-oF)協(xié)議進(jìn)行加速。NVMe-oF協(xié)議作為iSCSI協(xié)議的替代者,可以讓主機(jī)以使用本機(jī) NVMe協(xié)議方式訪問(wèn)分布式存儲(chǔ),提供低延時(shí)、高吞吐的塊存儲(chǔ)設(shè)備,解決了內(nèi)核態(tài)驅(qū)動(dòng)讀寫NVMe磁盤時(shí)可能會(huì)出現(xiàn)的內(nèi)核上下文切換和CPU中斷問(wèn)題。優(yōu)化后的方案能夠?yàn)榭蛻籼摂M機(jī)提供高性能的分布式存儲(chǔ),降低總體時(shí)延和減少時(shí)延差異。

金融與醫(yī)療行業(yè)面臨存儲(chǔ)性能瓶頸

近年來(lái),越來(lái)越多的金融與醫(yī)療機(jī)構(gòu)開始擁抱超融合,希望通過(guò)部署超融合一體機(jī)等方式,對(duì)硬件加以重構(gòu),以軟件定義的方式打造靈活高效的IT基礎(chǔ)設(shè)施。在擁抱超融合的同時(shí),金融與醫(yī)療機(jī)構(gòu)也非常關(guān)注超融合能否提供強(qiáng)大的存儲(chǔ)能力。

如今NVMe SSD的IOPS已經(jīng)遠(yuǎn)遠(yuǎn)高出HDD磁盤,時(shí)延從毫秒壓縮到微秒,系統(tǒng)的性能瓶頸也由存儲(chǔ)硬件本身逐漸轉(zhuǎn)移到網(wǎng)絡(luò)及處理器上。傳統(tǒng)文件系統(tǒng)和調(diào)度器等方法由于無(wú)法充分發(fā)揮新存儲(chǔ)介質(zhì)的性能,成為存儲(chǔ)系統(tǒng)的新瓶頸,具體包括:

  • 利用常規(guī)的NVMe內(nèi)核驅(qū)動(dòng)讀寫NVMe磁盤時(shí),會(huì)遇到內(nèi)核上下文切換和CPU中斷問(wèn)題。在高性能的全閃存儲(chǔ)中,中斷意味著時(shí)延的不確定,會(huì)導(dǎo)致較大時(shí)延和性能開銷。
  • 在傳統(tǒng)的I/O模型中,應(yīng)用程序提交讀寫請(qǐng)求后進(jìn)入睡眠狀態(tài)。待I/O完成后,中斷會(huì)將其喚醒,中斷開銷成為了整個(gè)I/O時(shí)間中非常重要的一部分。

浪潮云海超融合一體機(jī) InCloud Rail實(shí)現(xiàn)多維創(chuàng)新

作為新一代超融合解決方案,浪潮云海超融合一體機(jī)InCloud Rail通過(guò)軟件定義的計(jì)算、存儲(chǔ)和網(wǎng)絡(luò)技術(shù)實(shí)現(xiàn)了服務(wù)器的資源池化,使整個(gè)IT環(huán)境比單獨(dú)的物理硬件具有更高的可用性、安全性和擴(kuò)展性,能夠有效滿足企業(yè)對(duì)于降低成本、簡(jiǎn)化管理、提高安全性和擴(kuò)展性的需求,助力企業(yè)向云計(jì)算遷移核心業(yè)務(wù)、構(gòu)建企業(yè)云數(shù)據(jù)中心。

InCloud Rail實(shí)現(xiàn)了存儲(chǔ)資源的池化和統(tǒng)一管理,并通過(guò)全閃存架構(gòu)的軟件定義存儲(chǔ)SmartONE支持異構(gòu)算力的融合。SmartONE采用etcd組件作為集群管理,負(fù)責(zé)分布式存儲(chǔ)的節(jié)點(diǎn)的關(guān)系、節(jié)點(diǎn)之間的元數(shù)據(jù)傳遞及一致性等。在資源管理方面SmartONE提供了qemu、iSCSI和NVMe-oF的服務(wù)入口,對(duì)接VDI卷管理入口,對(duì)外提供存儲(chǔ)資源。在對(duì)象存儲(chǔ)方面,SmartONE主要接收VDI的IO請(qǐng)求,根據(jù)數(shù)據(jù)分布算法調(diào)度到相關(guān)節(jié)點(diǎn),根據(jù)副本策略和EC規(guī)則調(diào)用Gateway分發(fā)到分布式存儲(chǔ)的存儲(chǔ)節(jié)點(diǎn)。

圖1. 浪潮云海超融合一體機(jī)InCloud Rail架構(gòu)
圖1. 浪潮云海超融合一體機(jī)InCloud Rail架構(gòu)

 

圖2. 浪潮SmartONE軟件架構(gòu)
圖2. 浪潮SmartONE軟件架構(gòu)

為了滿足數(shù)據(jù)庫(kù)等實(shí)時(shí)讀寫、隨機(jī)訪問(wèn)超大規(guī)模數(shù)據(jù)集等場(chǎng)景對(duì)于存儲(chǔ)性能的嚴(yán)苛要求, InCloud Rail除了探索使用新一代存儲(chǔ)介質(zhì)之外,在SmartONE分布式存儲(chǔ)的單機(jī)存儲(chǔ)引擎、NVMe-oF存儲(chǔ)服務(wù)等模塊中,采用了SPDK進(jìn)行優(yōu)化。

單機(jī)存儲(chǔ)引擎方面,浪潮SmartONE分布式存儲(chǔ)基于SPDK的NVMe驅(qū)動(dòng)實(shí)現(xiàn)了高性能底座,支持和NVMe磁盤設(shè)備直接交互,同時(shí)采用無(wú)鎖設(shè)計(jì),并行處理IO命令。此外,NVMe上層實(shí)現(xiàn)了專屬NVMe的單機(jī)存儲(chǔ)引擎系統(tǒng),該引擎系統(tǒng)通過(guò)基于內(nèi)存的元數(shù)據(jù)和日志管理系統(tǒng),有效避免了傳統(tǒng)文件系統(tǒng)的雙寫問(wèn)題。測(cè)試數(shù)據(jù)顯示,浪潮SmartONE分布式存儲(chǔ)的單機(jī)存儲(chǔ)引擎幾乎達(dá)到了NVMe物理硬盤支持的性能上限。

圖3 專屬 NVMe 的單機(jī)存儲(chǔ)引擎系統(tǒng)
圖3 專屬 NVMe 的單機(jī)存儲(chǔ)引擎系統(tǒng)

NVMe-oF 分布式存儲(chǔ)服務(wù)方面,NVMe-oF分布式存儲(chǔ)服務(wù)為超融合平臺(tái)提供兩種塊服務(wù)解決方案,其一是采用vhost-user技術(shù)方案,可以為虛擬機(jī)提供更短的IO路徑;其二是作為存儲(chǔ)服務(wù),為服務(wù)器提供NVMe-oF的TCP/RDMA的塊服務(wù)。SmartONE利用SPDK vhost-user技術(shù),直接消除Guest虛擬機(jī)通過(guò)PCIE方式訪問(wèn)NVMe設(shè)備,避免內(nèi)核更新PCI配置空間;同時(shí)直接在用戶態(tài)捕獲QEMU虛擬IO,以零拷貝方式將數(shù)據(jù)傳輸?shù)酱鎯?chǔ)系統(tǒng)中。

SmartONE支持以NVMe-oF存儲(chǔ)協(xié)議方式提供塊存儲(chǔ)服務(wù),它可以提供TCP和RDMA兩種形式的外部訪問(wèn)。NVMe-oF存儲(chǔ)協(xié)議作為iSCSI協(xié)議的替代者,可以讓主機(jī)以使用本機(jī)NVMe協(xié)議的方式訪問(wèn)分布式存儲(chǔ),提供低延時(shí)、高吞吐的塊存儲(chǔ)設(shè)備。

圖4  SmartONE NVMe-oF分布式存儲(chǔ)服務(wù)
圖4 SmartONE NVMe-oF分布式存儲(chǔ)服務(wù)

消除性能瓶頸,打造高性能存儲(chǔ)

浪潮SmartONE分布式存儲(chǔ)系統(tǒng)能夠充分發(fā)揮NVMe固態(tài)盤的性能潛力,應(yīng)對(duì)在IOPS和時(shí)延方面有著較高要求的數(shù)據(jù)庫(kù)應(yīng)用場(chǎng)景。

  • 顯著提升存儲(chǔ)系統(tǒng)的性能,并降低數(shù)據(jù)時(shí)延,能夠滿足有著苛刻要求的數(shù)據(jù)庫(kù)應(yīng)用場(chǎng)景,同時(shí)有效控制分布式存儲(chǔ)系統(tǒng)的總體擁有成本(TCO);
  • 集成于超融合一體機(jī)中,能夠通過(guò)一體機(jī)所預(yù)置的虛擬化平臺(tái)、云管理平臺(tái)、快速部署工具以及相關(guān)的工作流程,顯著簡(jiǎn)化部署、管理和運(yùn)維工作的復(fù)雜性。

未來(lái),浪潮還將堅(jiān)持以用戶為中心,緊密結(jié)合前沿技術(shù)發(fā)展趨勢(shì)與市場(chǎng)需求,持續(xù)創(chuàng)新引領(lǐng)、迭代優(yōu)化,打造集融合至簡(jiǎn)、性能不凡、強(qiáng)大可靠、開放生態(tài)特性于一身的超融合一體機(jī),持續(xù)為用戶業(yè)務(wù)上云、數(shù)字化轉(zhuǎn)型升級(jí)貢獻(xiàn)力量。

消息來(lái)源:浪潮
China-PRNewsire-300-300.png
全球TMT
微信公眾號(hào)“全球TMT”發(fā)布全球互聯(lián)網(wǎng)、科技、媒體、通訊企業(yè)的經(jīng)營(yíng)動(dòng)態(tài)、財(cái)報(bào)信息、企業(yè)并購(gòu)消息。掃描二維碼,立即訂閱!
collection