🤵 ⛵️ 👩🏻 हमने यांडेक्स की ड्यूटी शिफ्ट कैसे खाली कर दी 👼🏼 ☀️ 🤺

जब काम एक लैपटॉप में फिट बैठता है और अन्य लोगों से स्वायत्त रूप से प्रदर्शन किया जा सकता है, तो किसी दूरस्थ स्थान पर जाने में कोई समस्या नहीं है - बस सुबह घर पर रहें। लेकिन हर कोई इतना भाग्यशाली नहीं था।

ड्यूटी शिफ्ट सेवा उपलब्धता विशेषज्ञों (SRE) की एक टीम है। इसमें ड्यूटी प्रशासक, डेवलपर्स, प्रबंधक, साथ ही प्रत्येक 55 इंच के 26 एलसीडी पैनलों का एक आम "डैशबोर्ड" शामिल है। कंपनी सेवाओं की स्थिरता और समस्याओं को हल करने की गति ड्यूटी पर शिफ्ट के काम पर निर्भर करती है।

आज दिमित्री मेलिकोवtal10nशिफ्ट पर्यवेक्षक, इस बारे में बात करेंगे कि वे अपने घरों में उपकरणों को परिवहन करने में कैसे कामयाब रहे और कुछ ही दिनों में नई कार्य प्रक्रियाओं को स्थापित किया। मैं उसे मंजिल देता हूं।

- जब आपके पास समय की अंतहीन आपूर्ति होती है, तो आप आराम से कहीं भी कुछ भी ले जा सकते हैं। लेकिन कोरोनावायरस के तेजी से प्रसार ने हमें पूरी तरह से अलग परिस्थितियों में डाल दिया। यैंडेक्स के कर्मचारी रिमोट-काम पर स्विच करने वाले पहले लोगों में थे - आत्म-अलगाव शासन की शुरुआत से पहले भी। यह इस तरह हुआ। गुरुवार, 12 मार्च को, मुझे टीम के काम को घर पर स्थानांतरित करने के अवसर का मूल्यांकन करने के लिए कहा गया। 13 वें शुक्रवार को दूरस्थ कार्य पर स्विच करने की सिफारिश की गई थी। मंगलवार, 17 मार्च की रात को, हमारे लिए सब कुछ तैयार था: परिचारकों ने घर पर काम किया, उपकरण ले जाया गया, लापता सॉफ्टवेयर को लिखा गया, प्रक्रियाओं को फिर से जोड़ा गया। और अब मैं आपको बताता हूं कि हमने यह कैसे किया। लेकिन पहले आपको उन कार्यों को याद रखना होगा जो ड्यूटी पर शिफ्ट द्वारा हल किए जाते हैं।

हम कौन हैं

Yandex सैकड़ों सेवाओं वाली एक बड़ी कंपनी है। खोज, आवाज सहायक और अन्य सभी उत्पादों की स्थिरता न केवल डेवलपर्स पर निर्भर करती है। डेटा सेंटर बिजली की आपूर्ति को बाधित कर सकता है। डामर की जगह एक कर्मचारी गलती से एक ऑप्टिकल केबल को नुकसान पहुंचा सकता है। या उपयोगकर्ता गतिविधि में वृद्धि हो सकती है, जिसके लिए बिजली की तत्काल प्राप्ति की आवश्यकता होगी। इसके अलावा, हम सभी एक बड़े, जटिल बुनियादी ढांचे में रहते हैं, और किसी एक उत्पाद के जारी होने से गलती से दूसरे की गिरावट हो सकती है।

हमारे खुले स्थान में 26 पैनल डेढ़ हजार अलर्ट और एक सौ से अधिक चार्ट और हमारी सेवाओं के पैनल हैं। वास्तव में, यह एक विशाल नैदानिक पैनल है। एक अनुभवी ड्यूटी प्रशासक, उसे देख रहा है, जल्दी से महत्वपूर्ण नोड्स की स्थिति को समझता है और तकनीकी समस्या की जांच के लिए एक दिशा स्थापित कर सकता है। इसका मतलब यह नहीं है कि किसी व्यक्ति को लगातार सभी उपकरणों को देखना चाहिए: स्वचालन स्वयं कर्तव्य पर व्यक्ति के विशेष इंटरफ़ेस पर एक अधिसूचना भेजकर ध्यान आकर्षित करेगा, लेकिन एक दृश्य पैनल के बिना, समस्या के समाधान में देरी हो सकती है।

जब समस्याएं उत्पन्न होती हैं, तो परिचर सबसे पहले उनकी प्राथमिकता का आकलन करता है। वह तब समस्या को अलग करता है या उपयोगकर्ताओं पर इसके प्रभाव को कम करता है।

किसी समस्या को अलग करने के कई मानक तरीके हैं। उनमें से एक सेवाओं का ह्रास है, जब ड्यूटी पर प्रशासक कुछ ऐसे कार्यों को निष्क्रिय कर देता है जिन्हें उपयोगकर्ता कम से कम नोटिस करते हैं। यह आपको अस्थायी रूप से लोड को कम करने और यह पता लगाने की अनुमति देता है कि क्या हुआ। यदि डेटा सेंटर के साथ कोई समस्या है, तो परिचर ऑपरेशन टीम से संपर्क करता है, समस्या को समझता है, इसके समाधान के समय को नियंत्रित करता है और यदि आवश्यक हो, तो प्रोफ़ाइल कमांड को जोड़ता है।

जब ड्यूटी पर मौजूद प्रशासक उस समस्या को अलग नहीं कर सकता है जो रिलीज़ होने के कारण उत्पन्न हुई है, तो वह इसे सेवा दल को रिपोर्ट करता है - और डेवलपर्स नए कोड में त्रुटियों की तलाश करते हैं। यदि वे इसका पता लगाने में सक्षम नहीं हैं, तो व्यवस्थापक सेवाओं की उपलब्धता के लिए अन्य उत्पादों या इंजीनियरों से डेवलपर्स को आकर्षित करता है।

मैं लंबे समय तक बात कर सकता हूं कि हमारे साथ सब कुछ कैसे व्यवस्थित किया जाता है, लेकिन मुझे लगता है कि मैंने पहले ही सार को बता दिया है। ड्यूटी शिफ्ट सभी सेवाओं के काम का समन्वय करता है और वैश्विक समस्याओं को नियंत्रित करता है। ड्यूटी पर प्रशासक के लिए आंखों के सामने डायग्नोस्टिक पैनल होना जरूरी है। इसीलिए जब दूरस्थ काम पर जाते हैं, तो आप सभी को लैपटॉप नहीं दे सकते। चार्ट और अलर्ट स्क्रीन पर फिट नहीं होते हैं। क्या करें?

विचार

कार्यालय में, सभी दस ऑन-ड्यूटी प्रशासक एक डैशबोर्ड के पीछे की पाली में काम करते हैं, जिसमें 26 मॉनिटर, दो कंप्यूटर, चार NVIDIA क्वाड्रो एनवीएस 810 वीडियो कार्ड, दो निर्बाध बिजली आपूर्ति इकाइयां और कई स्वतंत्र नेटवर्क एक्सेस शामिल हैं। लेकिन हमें घर पर काम करने का अवसर प्रदान करने की आवश्यकता थी। यह सिर्फ अपार्टमेंट में ऐसी दीवार को इकट्ठा करने के लिए काम नहीं करता है (मेरी पत्नी इस बारे में विशेष रूप से खुश होगी), इसलिए हमने एक पोर्टेबल संस्करण बनाने का फैसला किया जिसे घर पर लाया और इकट्ठा किया जा सकता है।

हमने कॉन्फ़िगरेशन के साथ प्रयोग करना शुरू कर दिया। हमें कम डिस्प्ले पर सभी उपकरणों को फिट करने की आवश्यकता थी, इसलिए मॉनिटर के लिए मुख्य आवश्यकता एक उच्च पिक्सेल घनत्व था। हमारे वातावरण में उपलब्ध 4K मॉनिटर में से लेनोवो P27u-10 को परीक्षण के लिए चुना गया था।

लैपटॉप से उन्होंने 16 इंच का मैकबुक प्रो लिया। इसमें एक काफी शक्तिशाली ग्राफिक्स सबसिस्टम है, जो कई 4K डिस्प्ले और चार यूनिवर्सल टाइप-सी कनेक्टर पर चित्रों को प्रस्तुत करने के लिए आवश्यक है। आप पूछ सकते हैं: डेस्कटॉप क्यों नहीं? एक गोदाम से बिल्कुल उसी तरह एक लैपटॉप को बदलना एक समान सिस्टम यूनिट को इकट्ठा करने और कॉन्फ़िगर करने की तुलना में बहुत आसान और तेज है। हां, और इसका वजन कम है।

अब यह समझना आवश्यक था कि हम वास्तव में लैपटॉप से कितने मॉनिटर कनेक्ट कर सकते हैं। और यहाँ समस्या कनेक्टर्स की संख्या नहीं है, हम पूरी प्रणाली का परीक्षण करके ही पता लगा सकते हैं।

परिक्षण

हमने चार चार्ट पर सभी चार्ट और अलर्ट को आराम से रखा और उन्हें एक लैपटॉप से जोड़ा, लेकिन हम एक समस्या में भाग गए। कनेक्ट किए गए मॉनीटर पर 4 × 4K पिक्सल का रेंडरिंग वीडियो कार्ड को इतना लोड करता है कि लैपटॉप को चार्ज करते समय भी डिस्चार्ज कर दिया जाता है। सौभाग्य से, समस्या को लेनोवो थंडरबोल्ट 3 डॉक जनरल 2 डॉकिंग स्टेशन की मदद से हल किया गया था। हम एक मॉनिटर, पावर और यहां तक कि एक पसंदीदा माउस को कीबोर्ड के साथ डॉकिंग स्टेशन से कनेक्ट करने में कामयाब रहे।

लेकिन तुरंत एक और समस्या सामने आई: जीपीयू इतना भर गया कि लैपटॉप गर्म हो गया, जिसका मतलब था कि बैटरी भी गर्म हो गई, जिसके परिणामस्वरूप सुरक्षात्मक मोड में चला गया और चार्ज लेना बंद कर दिया। सामान्य तौर पर, यह एक बहुत ही उपयोगी तरीका है जो खतरनाक स्थितियों से बचाता है। कुछ मामलों में, उच्च तकनीक वाले डिवाइस की मदद से समस्या का समाधान किया गया - एक बॉलपॉइंट पेन, वेंटिलेशन में सुधार करने के लिए एक लैपटॉप के नीचे रखा गया। लेकिन इससे सभी को फायदा नहीं हुआ, इसलिए हमने एक नियमित प्रशंसक की गति को भी मोड़ दिया।

एक और अप्रिय विशेषता थी। सभी चार्ट और अलर्ट कड़ाई से परिभाषित स्थान पर स्थित होने चाहिए। कल्पना कीजिए कि आप एक विमान को लैंड करने के लिए पायलट कर रहे हैं - और यहाँ गति संकेतक, अल्टीमीटर, वेरिओमीटर, क्षितिज संकेतक, कम्पास और स्थिति संकेतक विभिन्न स्थानों पर आकार बदलने और कूदने लगते हैं। इसलिए हमने एक ऐसा एप्लिकेशन बनाने का फैसला किया, जो इससे मदद करेगा। एक शाम में, हमने इसे विंडोज़ पर लिखा था । विंडोज़ बनाने और प्रबंधित करने के लिए एक तैयार एपीआई लेकर । हमने एक कॉन्फ़िगरेशन हैंडलर और उनके आवधिक अद्यतन को जोड़ा, साथ ही साथ सीमित संख्या में मॉनिटर के लिए समर्थन किया। थोड़ी देर बाद, हमने विभिन्न सेटअपों के लिए समर्थन जोड़ा।

असेंबली और डिलीवरी

सोमवार तक, हेल्पडेस्क विजार्ड्स को हमारे लिए 40 मॉनिटर, दस लैपटॉप और कई डॉकिंग स्टेशन मिले थे। मुझे नहीं पता कि उन्होंने यह कैसे किया, लेकिन बहुत-बहुत धन्यवाद।

यह सब ड्यूटी प्रशासकों के अपार्टमेंट तक ले जाने के लिए बना रहा। और ये मास्को के विभिन्न हिस्सों में दस पते हैं: दक्षिण, पूर्व, केंद्र, और बालाशिखा, जिसमें कार्यालय से 45 किलोमीटर की दूरी पर हैं (वैसे, सर्पुखोव से एक इंटर्न भी बाद में जोड़ा गया था)। रसद का निर्माण करने के लिए, लोगों के बीच यह सब वितरित करना आवश्यक था।

मैंने हमारे मानचित्रों के सभी पते निकाल दिए, अभी भी विभिन्न बिंदुओं के बीच मार्ग को अनुकूलित करने का अवसर है (मैंने कोरियर के लिए उपकरण के मुक्त बीटा संस्करण का उपयोग किया)। हमने अपनी टीम को दो लोगों की चार स्वतंत्र टीमों में तोड़ दिया, प्रत्येक को अपना रास्ता मिल गया। मेरी कार सबसे अधिक क्षमता वाली थी, इसलिए मैंने एक साथ चार कर्मचारियों के लिए उपकरण लिया।

पूरी डिलीवरी में तीन घंटे का रिकॉर्ड था। हम सोमवार को शाम दस बजे दफ्तर से चले गए। सुबह एक बजे मैं घर पर था। उसी रात हम नए उपकरणों के साथ ड्यूटी पर गए।

इसका परिणाम क्या है

एक बड़े नैदानिक कंसोल के बजाय, हमने ड्यूटी पर प्रत्येक व्यक्ति के अपार्टमेंट में दस अपेक्षाकृत पोर्टेबल वाले एकत्र किए। बेशक, यह कुछ छोटी चीजों को निपटाने के लिए बना रहा। उदाहरण के लिए, पहले हमारे पास सूचनाओं के लिए ड्यूटी पर मौजूद व्यक्ति का एक "लोहा" टेलीफोन था। नई स्थितियों में, यह काम नहीं करता था, इसलिए हम ड्यूटी पर रहने वालों (वास्तव में, मैसेंजर में चैनल) के लिए "आभासी फोन" लेकर आए थे। अन्य बदलाव भी हुए। लेकिन मुख्य बात यह है कि रिकॉर्ड समय में हम न केवल लोगों को स्थानांतरित करने में कामयाब रहे, बल्कि संक्रमण के जोखिम को कम किया, लेकिन उत्पादों की प्रक्रियाओं और स्थिरता को नुकसान पहुंचाए बिना हमारे सभी घर पर काम करते हैं। इस मोड में, हम एक महीने से काम कर रहे हैं।

नीचे आपको हमारे परिचारकों की वास्तविक नौकरियों की तस्वीरें मिलेंगी।

हमने यांडेक्स की ड्यूटी शिफ्ट कैसे खाली कर दी

हम कौन हैं

विचार

परिक्षण

असेंबली और डिलीवरी

इसका परिणाम क्या है

More articles: