🤷🏿 😡 🛢️ समीक्षा करें और परीक्षण हुआवेई डोरैडो 5000V6 💃🏿 🗄️ 🎰

छह महीने पहले, मैं पहले से ही Huawei भंडारण लाइन - डोरैडो V6 को अपडेट करने के बारे में बात करना शुरू कर रहा था। वास्तव में, मैं आधिकारिक घोषणा से पहले उन्हें जानने में कामयाब रहा, और यह तर्कसंगत है कि उस समय मेरे पास उन्हें अपने हाथों से छूने का अवसर नहीं था। मेरे लेख " हुआवेई डोरैडो वी 6: सिचुआन हीट " में, मैंने पुराने डोरैडो 8000 और 18000 वी 6 मॉडल पर ध्यान केंद्रित किया, क्योंकि वास्तुकला की दृष्टि से वे उस समय मेरे लिए सबसे दिलचस्प थे। अंत में, मुझे हमारी प्रयोगशाला में 5000V6 प्रणाली का परीक्षण करने और इन प्रणालियों के तकनीकी पक्ष के बारे में अधिक बात करने का अवसर मिला।

एक ओर, यह 5000V6 प्रणाली की समीक्षा और परीक्षण है, दूसरी ओर, यह पिछले लेख की तार्किक निरंतरता है, क्योंकि पिछले छह महीनों में, सिस्टम के विभिन्न घटकों, कार्य के तर्क और कार्यान्वित कार्यक्षमता के बारे में अधिक विवरण सामने आए हैं।

लेकिन चलो सही बात पर आते हैं। चूंकि यह प्रणाली अधिक परिचित है - एक दोहरी-नियंत्रक प्रणाली, इसने अपनी बड़ी बहनों के कुछ फायदे खो दिए हैं।

साझा मोर्चा और बैकेंड की कमी।
इसके अलावा, 5000V6 और 6000V6 सिस्टम में, प्रत्येक नियंत्रक पर केवल दो कुनपेंग 920 प्रोसेसर स्थापित किए जाते हैं, और 3000V6 में एक।
यदि समान अलमारियों को 5000V6 और 6000V6 के लिए 8000V6 और 18000V6 के लिए Kunpeng चिप्स के साथ आपूर्ति की जाती है, जो पुनर्निर्माण प्रक्रिया को गति देने के लिए डिज़ाइन की गई हैं, और ये अलमारियाँ 100Gb RDMA के माध्यम से जुड़ी हुई हैं, तो छोटे 3000V6 मॉडल के लिए केवल SAS अलमारियाँ उपलब्ध हैं।
5000V6 और 6000V6 36 PALM SSDs या 25 x 2.5 "" साधारण "SAS SSDs (सिलेक्ट करते समय सिस्टम को कॉन्फ़िगर करते समय चयनित) स्थापित करने के लिए डिज़ाइन किए गए हैं, सबसे कम 3000V6 केवल 25 SAS SSDs का समर्थन करता है।
3000V6 नियंत्रक पर तीन हॉट-स्वैपेबल इंटरफ़ेस कार्ड की स्थापना का समर्थन करता है, 5000V6 और 6000V6 छह कार्ड का समर्थन करता है।

पिछले लेख की तरह, एंड-टू-एंड एनवीएमई के बारे में एक फुटनोट है: निकट भविष्य में टीसीपी / आईपी से अधिक आरसीई वी 2 और एनवीएमई पर एनवीएमई के लिए समर्थन की योजना है।

वास्तुकला में, दोहरे-नियंत्रक सिस्टम, निश्चित रूप से, अलग-अलग भी हैं।

ओशनस्टॉर डोरैडो वी 6 एक सक्रिय-सक्रिय वास्तुकला का उपयोग करता है जिसमें निम्नलिखित प्रौद्योगिकियां होती हैं।

लोड संतुलन एल्गोरिथ्म: संतुलन प्रत्येक नियंत्रक द्वारा प्राप्त अनुरोधों को पढ़ता है और लिखता है।
ग्लोबल कैश: LUN को मालिक नहीं होने देता है। प्रत्येक नियंत्रक प्राप्त रीड एंड रिक्वेस्ट को प्रोसेस करता है, कंट्रोलर्स के बीच लोड बैलेंसिंग प्रदान करता है।
RAID 2.0+: डिस्क पर लोड को संतुलित करते हुए समान रूप से स्टोरेज पूल में सभी डिस्क पर डेटा वितरित करता है।

RAID 2.0+

यदि डेटा को समान रूप से एक SSD पर संग्रहीत नहीं किया जाता है, तो कुछ भारी लोड वाले SSD एक सिस्टम टोंटी बन सकते हैं। OceanStor Dorado V6 ड्राइव के बीच लोड को संतुलित करते हुए, प्रत्येक SSD पर सभी LUN में समान रूप से डेटा वितरित करने के लिए RAID 2.0+ का उपयोग करता है। ओशनस्टोर डोरैडो वी 6 इम्प्लांट RAID 2.0+ निम्नानुसार है:

कई SSDs एक संग्रहण पूल बनाते हैं
लॉजिकल स्पेस मैनेजमेंट को आसान बनाने के लिए प्रत्येक SSD को निश्चित आकार के विखंडू (आमतौर पर 4 एमबी प्रति चंक) में विभाजित किया गया है
विभिन्न SSDs से विखंडू उपयोगकर्ता-परिभाषित RAID नीति के आधार पर एक चंक समूह बनाते हैं
चंक समूह को "अनाज" (आमतौर पर 8 केबी) में विभाजित किया जाता है, जो वॉल्यूम के लिए सबसे छोटी इकाई हैं

पूर्ण-धारी लिखें

SSDs पर फ्लैश मेमोरी चिप्स को सीमित संख्या में मिटाया जा सकता है। पारंपरिक RAID रीराइट मोड (राइट-टू-प्लेस) में, एसएसडी पर गर्म डेटा लगातार ओवरराइट किया जाता है और इसके फ्लैश चिप्स जल्दी से बाहर निकलते हैं। ओशनस्टॉर डोरैडो वी 6 नए और पुराने दोनों डेटा के लिए पूर्ण-पुनर्निर्देशित लेखन (आरओडब्ल्यू) रिकॉर्डिंग का उपयोग करता है। वह प्रत्येक रिकॉर्ड के लिए एक नई फ्लैश चिप आवंटित करता है, जो कि सभी फ्लैश चिप्स को मिटाए जाने की संख्या को संतुलित करता है। यह अपने आप कंट्रोलर पर प्रोसेसर लोड को कम करता है और लिखने की प्रक्रिया के दौरान SSD पर रीड / राइट लोड, विभिन्न RAID स्तरों पर सिस्टम के प्रदर्शन को बढ़ाता है।

एंड-टू-एंड I / O प्राथमिकता

कुछ I / O प्रकारों के लिए निरंतर विलंबता सुनिश्चित करने के लिए, OceanStor Dorado V6 नियंत्रकों ने प्रत्येक I / O ऑपरेशन को उसके प्रकार के अनुसार प्राथमिकता के साथ चिह्नित किया। यह सिस्टम को CPU और अन्य संसाधनों की योजना बनाने और उन्हें प्राथमिकता देने की अनुमति देता है, I / O प्राथमिकताओं के आधार पर विलंबता की गारंटी देता है। विशेष रूप से, कई I / O SSD प्राप्त करने के बाद अपनी प्राथमिकताओं की जाँच करें और प्राथमिक रूप से उच्च प्राथमिकता के साथ संचालन की प्रक्रिया करें।

ओशनस्टोर डोरैडो V6 I / O संचालन को निम्नलिखित पांच प्रकारों में वर्गीकृत करता है और उन्हें अवरोही क्रम में प्राथमिकता देता है, जिससे इष्टतम आंतरिक और बाहरी I / O प्रतिक्रिया मिलती है:

पढ़ने / लिखने के संचालन
उन्नत I / O फ़ंक्शन
Rebild
कैश फ्लश करें
कचरा इकठा करना

प्रत्येक ड्राइव पर, इनपुट / आउटपुट संचालन को प्राथमिकता देने के अलावा, ओशनस्टोर डोरैडो वी 6 वर्तमान लेखन को बाधित करने और संचालन को मिटाने के लिए उच्च प्राथमिकता वाले रीड अनुरोधों की अनुमति देता है। इस स्थिति में, डिस्क विलंबित पढ़ती है (यदि कैश में कोई डेटा नहीं था) सीधे मेजबान रीड विलंब को प्रभावित करता है। आमतौर पर, एक एसएसडी फ्लैश ड्राइव तीन ऑपरेशन करता है: पढ़ना, लिखना और मिटा देना। मिटा देरी 5 एमएस से 15 एमएस तक है, लिखने में देरी 2 एमएस से 4 एमएस तक है, और पढ़ने में देरी दसियों μs से 100 μs तक है। जब फ्लैश चिप एक लेखन या मिटाए गए ऑपरेशन को करता है, तो रीड ऑपरेशन को तब तक इंतजार करना चाहिए जब तक कि वर्तमान ऑपरेशन पूरा नहीं हो जाता है, जिससे रीड देरी में महत्वपूर्ण वृद्धि होती है।

स्मार्ट डिस्क संलग्नक

जैसा कि मैंने पिछले लेख में लिखा था, नई डिस्क अलमारियां अपने स्वयं के प्रोसेसर और रैम से सुसज्जित हैं। यह आपको नियंत्रक से डिस्क विफलता से उबरने जैसे कार्यों को स्थानांतरित करने की अनुमति देता है। यह डिस्क विफलताओं के कारण डेटा रिकवरी के मामले में नियंत्रकों पर लोड को काफी कम कर देता है। निम्न आंकड़ा एक उदाहरण के रूप में RAID 6 (21 + 2) का उपयोग करके एकल डिस्क शेल्फ के भीतर डेटा रिकवरी प्रक्रिया को दर्शाता है। यदि ड्राइव D1 दोषपूर्ण है, तो नियंत्रक को D2-D21 और P पढ़ना चाहिए, और फिर D1 को पुन: लिखना चाहिए। कुल मिलाकर, डिस्क से 21 डेटा ब्लॉक को पढ़ना चाहिए। बड़े प्रोसेसर संसाधनों की खपत को पढ़ें और पुनर्स्थापित करें।

स्मार्ट डिस्क एन्क्लोजर शेल्फ को एक रिस्टोर रिक्वेस्ट मिलती है और डेटा को स्थानीय रूप से समता डेटा की गणना करने के लिए पढ़ता है। तब उसे केवल नियंत्रक के लिए समता डेटा को स्थानांतरित करने की आवश्यकता होती है। निम्न आंकड़ा दिखाता है कि नियंत्रक और डिस्क शेल्फ के बीच केवल चार समता डेटा ब्लॉक को स्थानांतरित करने की आवश्यकता है। यह नेटवर्क बैंडविड्थ को पांच गुना कम करके पुनर्प्राप्ति संचालन के प्रदर्शन को बचाता है।

नतीजतन, इस लोड को शेल्फ में प्रोसेसर में स्थानांतरित करना, पुनर्निर्माण कार्य से नियंत्रकों पर लोड को 10% से कम करना संभव है।

SmartDedupe और SmartCompression

OceanStor Dorado V6 स्वचालित रूप से उपयोगकर्ता डेटा की विशेषताओं के आधार पर अनुकूली समर्पण और संपीड़न करता है, दक्षता को अधिकतम करता है। समर्पण और संपीड़न की अनुकूली प्रक्रिया इस प्रकार है।

, , . , . .
, «» (SFP) «». , .
जब कई समान एसएफपी "क्षमताओं" तालिका में जमा होते हैं, तो इन एसएफपी के अनुरूप डेटा प्रसंस्करण के बाद डिडुप्लीकेशन डिस्क से पढ़ा जाता है। डिडुप्लीकेशन पूरा होने के बाद, फ़िंगरप्रिंट तालिका अपडेट की जाती है।

डेटा को संपीड़ित करने से पहले, OceanStor Dorado V6 उस हिस्से को निर्धारित करने के लिए अपने स्वयं के प्रीप्रोसेसिंग एल्गोरिथ्म का उपयोग करता है जो डेटा प्रारूप के आधार पर डेटा ब्लॉक में संपीड़ित करना मुश्किल है।

OceanStor डेटा को फिर से विभाजित करता है, इसे दो भागों में विभाजित करता है:

उस भाग के लिए जिसे संपीड़ित करना मुश्किल है, सिस्टम विशेष रूप से विकसित हुआवेई संपीड़न एल्गोरिथ्म का उपयोग करके इसे संपीड़ित करता है
दूसरे भाग के लिए, सिस्टम एक सामान्य संपीड़न एल्गोरिथ्म का उपयोग करता है

कुछ संग्रहण विक्रेता पहले से ही अपने शस्त्रागार में डेटा संघनन का उपयोग कर रहे हैं। लेकिन वे आम तौर पर डेटा को संपीड़ित करने के लिए एक 4K या 1K ब्लॉक का उपयोग करते हैं। Huawei आगे बढ़ गया है और बाइट संरेखण का उपयोग करता है। मुझे लगता है कि दृष्टांत स्पष्ट है।

इस प्रकार, हम 5KB से कम में 32KB उपयोगकर्ता डेटा फिट करते हैं।

संपीड़न और डिडुप्लीकेशन अब हमेशा उस क्षण से काम करते हैं जब आप उपयुक्त स्टोरेज ई ded सेक्शन लाइसेंस स्थापित करते हैं। इसे डिवाइस मैबगर से अक्षम नहीं किया जा सकता है, लेकिन यदि आप वास्तव में चाहते हैं, तो इसे सीएलआई के माध्यम से किया जा सकता है। विक्रेता के तर्क के अनुसार, अंतरिक्ष-बचत तकनीकों को हमेशा एसएसडी पर काम करना चाहिए।

पूरी लाइन में एक महत्वपूर्ण बिंदु। यद्यपि केवल पाँच मॉडल हैं, वे, अन्य बातों के अलावा, प्रत्येक नियंत्रक के कैश की मात्रा में आपस में भिन्न हैं:

ओशनस्टॉर डोरैडो 3000 वी 6: 192 जीबी
ओशनस्टॉर डोरैडो 5000 वी 6: 256 जीबी / 512 जीबी
ओशनस्टॉर डोरैडो 6000 V6: 1024 जीबी
ओशनस्टॉर डोरैडो 8000 वी 6: 512 जीबी / 1024 जीबी / 2048 जीबी
ओशनस्टोर डोरैडो 18000 वी 6: 512 जीबी / 1024 जीबी / 2048 जीबी

जैसा कि आप देख सकते हैं, पुराने मॉडलों की कुल मात्रा में परिवर्तन नहीं होता है, लेकिन ड्राइव की संख्या में परिवर्तन होता है। हुआवेई इंजीनियरों के बयानों के अनुसार, उनके पास सिस्टम को 2Pb से बड़ी मात्रा में परीक्षण करने का अवसर नहीं था। सैद्धांतिक रूप से, वे अधिक समर्थन करते हैं।

अधिकतम ड्राइव / अधिकतम क्षमता:

ओशनस्टोर डोरैडो 3000 V6 - 1000 / 500TiB
ओशनस्टोर डोरैडो 5000 V6 - 1200 / 1024TiB
ओशनस्टॉर डोरैडो 6000 V6 - 1500 / 2048TiB
ओशनस्टॉर डोरैडो 8000 V6 - 3200 / 2048TB
ओशनस्ट्रोर डोरैडो 18000 V6 - 6400 / 2048TiB

पिछले लेख में, मैं यह उल्लेख करना भूल गया कि कौन से इंटरफ़ेस कार्ड आमतौर पर उपलब्ध हैं:

मैंने पहले ही कहा (पिछले लेख में और इस एक दोनों में) कि हुआवेई अपने स्वयं के डिजाइन के एसएसडी प्रदान करता है - पाम साइज, या, जैसा कि वे उन्हें कहते हैं, हुआवेई-विकसित एसएसडी (एचएसएसडी) भंडारण उपकरणों के रूप में।

इस तथ्य के अलावा कि कंपनी उनके विकास को तेज मानती है, यह कुछ प्रमुख विशेषताएं भी प्रदान करती है।

SSD / - NAND. - NAND.

HSSD . SSD , /. SSD / , , , , .
(Bad Block)

- NAND. HSSD /, - NAND. , SSD (XOR) . HSSD , .
पृष्ठभूमि की जाँच

लंबे समय तक NAND फ़्लैश में डेटा संग्रहीत करने के बाद, डेटा त्रुटियाँ पढ़ने में व्यवधान, हस्तक्षेप लिखने, या आकस्मिक खराबी के कारण हो सकती हैं। HSSD समय-समय पर एक NAND फ़्लैश मेमोरी से डेटा पढ़ता है, बिट परिवर्तनों की जांच करता है, और नए पृष्ठों पर बिट परिवर्तन लिखता है। यह प्रक्रिया जोखिम का पूर्व पता लगाता है और प्रक्रिया करता है, जो प्रभावी रूप से डेटा हानि को रोकता है और डेटा सुरक्षा और विश्वसनीयता में सुधार करता है।

तो, चलो सीधे परीक्षणों पर जाएं। हमने 5000 GB6 और 512 GB कैश के साथ 5000V6 नियंत्रकों के दोनों रूपों का परीक्षण किया।

पहला परीक्षण था, इसलिए बोलना, वार्म-अप करना।

जैसा कि हम देख सकते हैं, 8k 50r / 50rw के इस लोड प्रोफाइल पर, अंतर लगभग 7% (220 kIOPs बनाम 205 kIOPs) था और केवल IOPS की अंतिम संख्या को प्रभावित किया था, और प्रतिक्रिया समय एक ही स्तर पर रहा - 0.9 एमएस।

वैसे, यह निर्धारित करना बहुत सरल था कि हमने नियंत्रक पर आराम करना शुरू कर दिया, सिस्टम ने स्वयं नियंत्रक प्रोसेसर के उच्च उपयोग की सूचना दी।

एसएसडी पर सभी प्रणालियों के लिए हम जो दूसरा परीक्षण करते हैं, उसका मूल्यांकन और अधिक जटिल प्रोफ़ाइल के साथ उनकी तुलना करना है।

प्रोफ़ाइल

[global]
direct=1
thread=1
iodepth=16
filename=/dev/sdb
ioengine=libaio
runtime=3600000
group_reptorting
time_based
[8r]
rw=randread
numjobs=24
bs=8k

[8w]
rw=randwrite
numjobs=24
bs=8k

[32r]
rw=randread
bs=32k
numjobs=1

[32w]
rw=randwrite
numjobs=1
bs=32k

[128r]
rw=read
bs=128k
numjobs=1

[128w]
rw=write
bs=128k
numjobs=1

[512r]
rw=read
bs=512k
numjobs=1

[512w]
rw=write
bs=512k
numjobs=1

यहां तस्वीर बिल्कुल अलग है। यदि दो हजार (172 kIOPs बनाम 170 kIOPs) में IOPS की संख्या में अंतर बिल्कुल भी महत्वपूर्ण नहीं है, तो विलंब पांच गुना (0.4 ms से 2.1 ms तक) बढ़ गया, हमें बताता है कि जब एक बड़े ब्लॉक के साथ काम करते हैं, तो बड़ी मात्रा में कैश होता है। सिस्टम को एक फायदा देता है।

पिछले साल, सहयोगियों और मैंने पहले से ही हुआवेई डोरैडो 5000 वी 3 का परीक्षण किया था , इसलिए अब हम इन दोनों प्रणालियों की तुलना कर सकते हैं।

चेहरे पर प्रगति। लोड प्रोफ़ाइल और परीक्षण प्रक्रिया दोनों मामलों में समान थीं।

बेशक, प्रतियोगियों के साथ तुलना करना अच्छा होगा, व्यक्तिगत रूप से, मेरे हाथों की नेटएपीएफ एएफएफ ए 400, पूर्ण एनवीएमई प्रणाली के साथ तुलना करने के लिए बहुत खुजली थी, जो इतने लंबे समय पहले नहीं दिखाई दी थी। दुर्भाग्य से, उसने अभी तक हमारे परीक्षण प्रयोगशाला का दौरा नहीं किया है, और एएफएफ ए 300 के साथ तुलना पूरी तरह से तार्किक नहीं है, भले ही हुआवेई के पिछले डोरैडो 5000 वी 3 को इसके प्रतियोगी के रूप में तैनात किया गया था।

21 वीं सदी के आंगन में, कई कंपनियां अपने सिस्टम के आकर्षण को बढ़ाने के लिए विभिन्न कार्यक्रमों की पेशकश करती हैं। हुआवेई ने इस दिशा में कदम रखने का फैसला किया है।

ई ﬀ अस्थानिक क्षमता की गारंटी

नए वी 6 स्टोरेज सिस्टम के साथ, आप कम्प्रेशन और डिडुप्लीकेशन के साथ सुरक्षित डेटा स्टोरेज पर भरोसा कर सकते हैं। सामान्य तौर पर, बाजार पर कई विक्रेता पहले से ही समान कार्यक्रम पेश करते हैं, जो कि अधिक कुशल भंडारण के कारण डेटा भंडारण प्रणाली के अधिग्रहीत उपयोगी वॉल्यूम पर अधिक डेटा के गारंटीकृत भंडारण की अनुमति देता है।

SSDs के प्रत्येक टेराबाइट की लागत अभी भी काफी अधिक है, इसलिए संपीड़न और डुप्लीकेशन तकनीक बेहद उपयोगी हैं, और वे कई प्रकार के डेटा पर उच्च दक्षता दिखाते हैं। यदि आपका डेटा वीडियो, ऑडियो, चित्र, वैज्ञानिक डेटा, पीडीएफ, एक्सएमएल या एन्क्रिप्टेड डेटा है, तो कटौती प्रभावी नहीं होगी, अन्यथा गारंटी काम करती है। यहां तक कि अगर आपने इंस्टॉल किए गए ड्राइव की अधिकतम संख्या के साथ एक सिस्टम खरीदा है, तो प्रोग्राम के तहत ड्राइव के साथ आपको एक विस्तार शेल्फ भी मिलेगा।

Flashver

अगर, एक साथ सरणी के साथ, आप Huawei हाई-केयर ऑनसाइट या सह-देखभाल प्रोग्राम खरीदते हैं, तो आप उसी लाइन के नए मॉडल के लिए नियंत्रकों के मुफ्त अपडेट पर भरोसा कर सकते हैं। यह आपको नई प्रणाली या डेटा माइग्रेशन खरीदने की आवश्यकता के बिना सबसे आधुनिक और उत्पादक प्रणाली रखने की अनुमति देता है। नियंत्रकों को बदलने की प्रक्रिया भी सेवा में रुकावट के बिना होती है।

यदि आप इंटरफेस के प्रशंसक हैं और अपडेट किए गए डिवाइस मैनेजर को देखना चाहते हैं, तो Huawei पोर्टल पर OceanStor Dorado 18000 V6 6.0.0 DeviceManager पहले से ही उपलब्ध है ।

दुर्भाग्य से, यह प्रणाली केवल कुछ दिनों के लिए हमारे परीक्षणों पर थी, इसलिए हम केवल प्रदर्शन को मापने में कामयाब रहे। लेकिन मैं कार्यात्मक परीक्षण, हमारी पसंदीदा विफलता परीक्षण करना और कुछ प्रदर्शन शिकायतों की जांच करना चाहूंगा जो कुछ ऑपरेशन करने में पिछली V3 लाइन में थे - यह समझना महत्वपूर्ण है कि नई लाइन में क्या परिवर्तन हुए (और, तदनुसार, सॉफ्टवेयर में) हुए हैं उन्होंने क्या प्रभाव डाला।

मैं यह नोट करना चाहता हूं कि मैं अपने लेखों के लिए जिन परीक्षणों का संचालन करता हूं उनमें से अधिकांश टीम वर्क हैं। मैं अपने सहयोगियों के साथ "ओनलंटा" कंपनी के एकीकरण समूह से अपने सहयोगियों का आभार व्यक्त करता हूं जिनके साथ मैं काम करता हूं।

वैसे, हम अपनी टीम में एक सिस्टम आर्किटेक्ट की तलाश कर रहे हैं ।

समीक्षा करें और परीक्षण हुआवेई डोरैडो 5000V6