डेविड ओ'ब्रायन (एक्सरस): मेट्रिक्स! मेट्रिक्स! मेट्रिक्स! भाग 2

डेविड ओ ब्रायन ने हाल ही में Microsoft Azure Stack क्लाउड उत्पादों पर ध्यान केंद्रित करते हुए अपनी खुद की कंपनी, Xirus (https://xirus.com.au) खोली। उनका उद्देश्य सीमावर्ती स्थानों, दूरदराज के कार्यालयों और क्लाउड में डेटा केंद्रों में हाइब्रिड अनुप्रयोगों के समन्वित निर्माण और प्रक्षेपण के लिए है।

डेविड Microsoft Azure और Azure DevOps (पूर्व में VSTS) से संबंधित व्यक्तियों और कंपनियों को सब कुछ सिखाता है और अभी भी व्यावहारिक परामर्श और इन्फ्रा-कोडिंग में लगा हुआ है। वह 5 साल के लिए Microsoft MVP अवार्ड (Microsoft Most Valuable Professional) का विजेता रहा है, और हाल ही में MVP Azure अवार्ड प्राप्त किया है। मेलबर्न माइक्रोसॉफ्ट क्लाउड और डाटाकेंटर मीटअप के सह-आयोजक के रूप में, ओ'ब्रायन नियमित रूप से अंतरराष्ट्रीय सम्मेलनों में बोलते हैं, समुदाय के साथ आईटी कहानियों को साझा करने के लिए एक जुनून के साथ दुनिया की यात्रा करने में उनकी रुचि को जोड़ते हैं। डेविड का ब्लॉग david-obrien.net पर स्थित है , और वह अपनी ऑनलाइन प्लुरललाइट ट्रेनिंग भी प्रकाशित करता है।

प्रस्तुति यह समझने के लिए कि आपके वातावरण में क्या हो रहा है और आपका एप्लिकेशन कैसे काम करता है, इसके लिए मेट्रिक्स के महत्व के बारे में बात करता है। Microsoft Azure में सभी प्रकार के वर्कलोड के लिए मैट्रिक्स प्रदर्शित करने का एक शक्तिशाली और आसान तरीका है, और व्याख्यान बताता है कि आप उन सभी का उपयोग कैसे कर सकते हैं।

3 बजे, रविवार, नींद के दौरान, आप अचानक एक पाठ संदेश के साथ उठते हैं: "सुपरक्रिटिकल एप्लिकेशन फिर से जवाब नहीं दे रहा है"। क्या हो रहा है? "ब्रेक" का कारण कहां और क्या है? इस चर्चा में, आप उन सेवाओं के बारे में जानेंगे जो Microsoft Azure ग्राहकों को लॉग एकत्र करने के लिए प्रदान करता है और विशेष रूप से, आपके क्लाउड वर्कलोड के लिए मेट्रिक्स। डेविड आपको बताएगा कि क्लाउड प्लेटफ़ॉर्म पर काम करते समय आपको किस मेट्रिक्स से दिलचस्पी लेनी चाहिए और उन्हें कैसे प्राप्त करना चाहिए। आप ओपन सोर्स टूल्स और बिल्डिंग डैशबोर्ड के बारे में जानेंगे, और इसके परिणामस्वरूप, आप अपना डैशबोर्ड बनाने के लिए पर्याप्त ज्ञान प्राप्त करेंगे।

और अगर सुबह के 3 बजे आप फिर से एक महत्वपूर्ण एप्लिकेशन के क्रैश के बारे में एक संदेश जगाते हैं, तो आप जल्दी से इसके कारण का पता लगा सकते हैं।

डेविड ओ'ब्रायन (एक्सरस): मेट्रिक्स! मेट्रिक्स! मेट्रिक्स! भाग 1 के

बाद से स्लाइड बहुत भारी हो जाएगा, मैं डेमो पसंद किया। विचार करें कि आप निगरानी की कल्पना कैसे कर सकते हैं, और मॉनिटर-मेट्रिक्स टैब से शुरू कर सकते हैं। जैसा कि मैंने उल्लेख किया है, यह काफी आसान है। आपको केवल संसाधन समूह ड्रॉप-डाउन मेनू में उपयोग किए गए संसाधन और संसाधन प्रकार मेनू में संसाधन प्रकार निर्दिष्ट करने की आवश्यकता है। हमारे मामले में, मैं सभी 72 प्रकार के मैट्रिक्स का चयन करता हूं।



सौभाग्य से या दुर्भाग्य से, अधिकांश क्लाउड सेवाएं आभासी मशीनों पर चलती हैं, और मैं भी यही करता हूं। इस वर्चुअल मशीन पर, डिफ़ॉल्ट रूप से, Microsoft हमें मेजबान मैट्रिक्स दिखाता है। विशेष रूप से, हम पिछले 24 घंटों में 15 मिनट के माप अंतराल के साथ इस वीएम से गुजरने वाले यातायात की मात्रा देख सकते हैं। आप देखते हैं कि हमें इस मीट्रिक के लिए एक शानदार डैशबोर्ड मिला है। यह बहुत उन्नत मीट्रिक नहीं है, और हम इसके साथ कुछ नहीं कर सकते हैं, मेगाबाइट में आउटगोइंग ट्रैफ़िक की मात्रा को छोड़कर। यहाँ उपकरण हैं: प्रतिबंधों के बारे में एक नया नियम जोड़ने की क्षमता और डैशबोर्ड में इस मीट्रिक को संलग्न करने की क्षमता।
जो लोग वर्चुअल मशीन का उपयोग करते हैं, उन्हें पता होना चाहिए कि टेलीग्राफ क्या है, जो RESORCE लाइन में इंगित किया गया है। यह गो में लिखा गया एक खुला स्रोत टिंग प्लगइन है, जिसे उस सिस्टम से मैट्रिक्स या डेटा एकत्र करने के लिए डिज़ाइन किया गया है जिस पर यह स्थापित है। टेलीग्राफ एकत्र मेट्रिक्स को InfluxDB डेटाबेस में पास करता है। यह क्रॉस-प्लेटफ़ॉर्म प्लगइन विंडोज और लिनक्स पर काम करता है।



जैसा कि मैंने कहा, डिफ़ॉल्ट रूप से, Microsoft Azure Monitor वर्चुअल मशीन के लिए हाइपरविजर मेट्रिक्स का उपयोग करता है, यह METRIC NAMESPACE लाइन पर इंगित किया गया है। इसी तरह AWS में हो रहा है। मैं जीएसपी क्लाउड प्लेटफॉर्म के बारे में कुछ नहीं कह सकता, क्योंकि मैंने कभी इसका इस्तेमाल नहीं किया है। इसलिए, मैं टेलीग्राफ को एक संसाधन के रूप में चुनता हूं और उसे इस मीट्रिक को सम मॉनिटर पर स्थानांतरित करने का निर्देश देता हूं।



मैं METRIC सूची में जा सकता हूं और प्रदर्शित अधिक मैट्रिक्स का चयन कर सकता हूं। उदाहरण के लिए, अब मैं use_steal मीट्रिक (अवरोधन का उपयोग करके) का चयन करता हूं। क्या किसी को पता है कि यह क्या है?



आप में से कितने पड़ोसियों के साथ एक अपार्टमेंट में रहते हैं जो बहुत जोर से संगीत सुनना पसंद करते हैं? ठीक है, इसलिए उपयोग_स्टाइल एक मीट्रिक है जो दिखाता है कि क्लाउड पड़ोसी आपके ऑपरेटिंग सिस्टम को कैसे प्रभावित कर सकते हैं। बहुत से लोग यह भूल जाते हैं कि वे सार्वजनिक क्लाउड वातावरण में अपने एप्लिकेशन चलाते हैं। GCP, AWS, और Azure दोनों में, प्रदाताओं ने आपको एक साझा बुनियादी ढांचे पर रखा है। आप अपने अवसंरचना - वर्चुअल मशीन, एप्लिकेशन, एपीआई - को अन्य उपयोगकर्ताओं के साथ साझा करते हैं। इसका मतलब यह नहीं है कि उनके पास आपके डेटा तक पहुंच है, लेकिन वे आपके अनुप्रयोगों को प्रभावित कर सकते हैं, और आपको इसके बारे में पता होना चाहिए। यदि आप इस प्रभाव के बारे में नहीं जानते हैं, तो आपके आवेदन को काम करने में कुछ कठिनाइयाँ हो सकती हैं। यदि आप उपयोग_स्टाइल मेट्रिक्स एकत्र नहीं करते हैं, तो आप यह नहीं जान पाएंगे कि आपका आवेदन बाहरी प्रभाव से प्रभावित हो सकता है। मान लीजिएआपने अपना प्रोग्राम लॉन्च किया, सब कुछ ठीक है, त्रुटियों के बिना, लेकिन अचानक कुछ होता है, और एप्लिकेशन क्रैश हो जाता है। यह काफी बार होता है और इस बात पर निर्भर करता है कि आप किस प्रकार की वर्चुअल मशीन का उपयोग कर रहे हैं और प्रत्येक होस्ट पर आपके प्रदाता के एक ही प्रकार के कितने वीएम हैं। यह संभावना है कि आपके कार्यक्रम इस बुनियादी ढांचे से प्रतिकूल रूप से प्रभावित होंगे।

इसे रोकने का एकमात्र तरीका दो तरह से है: पहला यह है कि जब तक सब कुछ अपने आप नहीं हो जाता तब तक प्रतीक्षा करें, और दूसरा यह है कि अपने वर्चुअल मशीन को किसी अन्य हाइपरवाइजर के मेजबान पर तैनात करें। हालाँकि, एक निर्णय लेने के लिए, आपको उचित मीट्रिक एकत्र करके इसके बारे में पता होना चाहिए। जैसा कि आप देख सकते हैं, यूज़_स्टाइल मीट्रिक का उपयोग करते समय, मॉनिटर कोई गतिविधि नहीं दिखाता है, शायद इसलिए कि मैंने बड़ी संख्या में एप्लिकेशन नहीं चलाए।

इसलिए, हम उस पर चयनित मैट्रिक्स के मॉनिटर रखकर अपना डैशबोर्ड बना सकते हैं। इस पैनल को अन्य उपयोगकर्ताओं के साथ साझा किया जा सकता है, और मैं आमतौर पर अपने ग्राहकों को इस तरह के पैनल बनाने की सलाह देता हूं, उन्हें कार्यालय में एक बड़ी स्क्रीन पर रखता हूं ताकि वे सभी कर्मचारियों को दिखाई दें।



हर सुबह, काम पर आने वाले, कोई भी इस तरह की स्क्रीन को देख सकता है और पता लगा सकता है कि सिस्टम के साथ क्या हो रहा है। उदाहरण के लिए, आप देख सकते हैं कि 500 ​​HTTP कनेक्शन त्रुटियां ठीक हो गई हैं और ग्राहकों को इसके बारे में सूचित करने के लिए इंतजार नहीं करना चाहिए, बल्कि उनकी घटना का कारण जानने के लिए और अपनी साइट के साथ समस्या को ठीक करना होगा।

एक अधिक उन्नत निगरानी प्रतिशत एकत्रित कर रही है। उदाहरण के लिए, आपके CPU का औसत प्रदर्शन जानना पर्याप्त नहीं हो सकता है, क्योंकि विभिन्न एप्लिकेशन प्रोसेसर को अलग तरीके से लोड करते हैं।



प्रतिशत आपको विश्व स्तर पर क्या हो रहा है की समझ प्रदान करते हैं। मान लीजिए कि 99 परसेंटाइल 200 एमएस है। इसका मतलब यह है कि आपके सभी अनुरोधों में से 99% में 200 एमएस तक का प्रतिक्रिया समय है, और इसका मतलब यह भी है कि आपके 1% ग्राहकों को 200 एमएस से अधिक की देरी के साथ प्रतिक्रिया प्राप्त होती है।

अपने एसएलए की सामग्री के आधार पर, याद रखें कि हमने शुरुआत में क्या बात की थी, आपको इस तथ्य पर विचार करना चाहिए। वास्तव में, अक्सर आप खाते के प्रतिशत में लेने के बजाय औसत मूल्य पर ध्यान देते हैं। और इस तरह के विचलन अपने आप में औसत मूल्य "छुपाता है"।

गौर कीजिए कि हमें ये मूल्य कैसे मिलते हैं। तथ्य यह है कि एज़्योर मॉनिटर कुछ भी गणना नहीं करता है। आप औसत मूल्य, अधिकतम या न्यूनतम प्राप्त कर सकते हैं, लेकिन यदि आपको गणनाओं के परिणामस्वरूप प्राप्त अधिक उन्नत मैट्रिक्स की आवश्यकता है, तो आपको लॉग विश्लेषण का उपयोग करना चाहिए। लॉग एनालिटिक्स KQL भाषा का उपयोग करता है, यह "बॉक्स से बाहर" Azure की एक बहुत ही उपयोगी विशेषता है।



यदि आप इस मीट्रिक को देखते हैं, तो आप देख सकते हैं कि संसाधन प्रदाता Microsoft.SQL है, इसे स्वयं "dtu_consumption_percent" कहा जाता है और प्रतिशत के निर्माण में लगा हुआ है। यह विशेष रूप से आपके वर्कफ़्लो पर लागू नहीं हो सकता है, लेकिन आपको पता होना चाहिए कि लॉग एनालिटिक्स मॉड्यूल यह क्षमता प्रदान करता है। इसलिए यदि आप अपने मैट्रिक्स की अधिक उन्नत गणना की आवश्यकता है, तो आप एनालिटिक्स का उपयोग कर सकते हैं। सच है, आपको इसके लिए भुगतान करना होगा। डिफ़ॉल्ट रूप से, यह टूल आपको प्रति माह 5 जीबी डेटा मुफ्त में संसाधित करने की अनुमति देता है, हालांकि, मैं उन ग्राहकों को जानता हूं जो प्रति मिनट 5 जीबी का उपयोग करते हैं। तो 5 जीबी प्रति माह पर्याप्त नहीं हो सकता है।

स्क्रीन पर आपको एक मीट्रिक दिखाई दे रही है जिसे मैं वर्तमान में 20 एमबी का उपयोग कर रहा हूं। चूंकि यह एक डेमो वातावरण है, इसलिए प्राप्त आंकड़ों की मात्रा बहुत कम है। जैसा कि मैंने कहा, बॉक्स के ठीक बाहर, लॉग एनालिटिक्स आपको प्रति माह 5 जीबी डेटा को मुफ्त में संसाधित करने की अनुमति देता है, इसे 41 दिनों तक संग्रहीत करता है। इन संस्करणों को पार करने के लिए भुगतान करना आवश्यक है, हालांकि, मेरे अनुभव में, यह सेवा अभी भी इसी तरह के तीसरे पक्ष के उत्पादों की तुलना में सस्ती है, जैसे स्प्लंक या सूमो।

आइए Grafana पर चलते हैं, जिसमें Azure Monitor के लिए एक प्लगइन है। यह कुछ हफ्तों पहले संस्करण 0.2 में जारी किया गया था। इस प्लगइन के लिए धन्यवाद, आप अपने मेट्रिक्स के लिए ग्राफाना का उपयोग कर सकते हैं। मैं ऐप सेवाओं पर ग्राफाना को तैनात करना पसंद करता हूं, क्योंकि यहां कंटेनरों का उपयोग करना संभव है। यह मुझे लैपटॉप पर एप्लिकेशन चलाने की अनुमति देता है। ऐसा करने के लिए, मैं यह कमांड लाइन चलाता हूं:



जिसके बाद मैं जल्दी से कुछ परीक्षण कर सकता हूं या अपने ग्राहकों को कुछ दिखा सकता हूं।
एक अज़ूर के माहौल में ग्राफाना को नियुक्त करने में भी एक लाइन लगती है, मैंने इसे केवल 4 में विभाजित किया ताकि मैं इसे एक स्क्रीन पर देख सकूं।



एज़्योर में तथाकथित "कंटेनर संरचनाएं" हैं जैसे कि एडब्ल्यूएस, समान Google संरचनाओं के बराबर। यह एक कंटेनर छवि है जिसे कई कंटेनरों में वितरित किया जा सकता है। मैंने जिस टीम पर प्रकाश डाला, उसी समय में अज़ूर मॉनीटर के रूप में ग्राफाना को लॉन्च किया। एक निगरानी वातावरण में ग्राफाना तैनात करने में लगभग 30 सेकंड लगते हैं।



मैं इन्फ्रास्ट्रक्चर कोड के माध्यम से ऐसा कर सकता हूं:



विवरण मेरे ट्विटर पर पाए जा सकते हैं, बाद में मैं अपने संपर्क दे दूंगा। एक्सटेंशन .yaml के साथ एक फ़ाइल इंगित करती है कि कंटेनर छवि का उपयोग कैसे करें और इसके साथ क्या करना है। यहां कोड की बहुत सारी लाइनें हैं, और मुझे विंडो को नीचे स्क्रॉल करने की आवश्यकता है ताकि आप इसे देख सकें। इस फ़ाइल को Gureana द्वारा Azure प्लेटफ़ॉर्म पर तैनात किया गया है।





इसलिए, मैं अपने लैपटॉप पर ग्राफाना जाता हूं और मेरे द्वारा बनाए गए डैशबोर्ड को दिखाता हूं। एक चीज जो मैं अभी भी नहीं कर सकता, वह है ग्राफ्टाना के लिए टेलीग्राफ मेट्रिक्स पास करना। दुर्भाग्य से, ये उपयोगी मैट्रिक्स जो एक वर्चुअल मशीन में चलते हैं, अभी तक ग्राफाना में प्रदर्शित नहीं हुए हैं। Microsoft इस समस्या को हल कर रहा है, और हम शायद टेलीग्राफ और ग्राफाना के नए संस्करणों में परिणाम देखेंगे। अभी के लिए, हम हाइपरविजर मेट्रिक्स का उपयोग कर सकते हैं जो टेलीग्राफ मीट्रिक लाइन के ड्रॉप-डाउन मेनू में डिफ़ॉल्ट रूप से प्रदान करता है। वर्चुअल मशीन में, विभिन्न कस्टम मेट्रिक्स बनाना संभव है, जिनमें ग्राफाना की कमी है, और फिर उन्हें इस एप्लिकेशन में पेस्ट करें। यह किया जा सकता है अगर कस्टम मीट्रिक को Azure मीट्रिक सूट में रखा जा सकता है।





ग्राहक अक्सर मुझसे पूछते हैं कि उन्हें क्या उपयोग करना चाहिए? ग्राफाना नेत्रहीन रूप से विभिन्न प्रक्रियाओं के मीट्रिक प्रदर्शित करता है, और एज़्योर आपको अधिक जटिल मीट्रिक गणना करने की अनुमति देता है। बाद के मामले में, आपको "बॉक्स से बाहर" मैट्रिक्स का एक बड़ा सेट मिलता है, लेकिन एज़्योर केवल एज़्योर मैट्रिक्स प्रदर्शित करता है। इस प्रकार, चुनाव आपके द्वारा किए जाने वाले कार्यों पर निर्भर करता है। आप अपनी साइट के लिए मेट्रिक्स बना सकते हैं, डेटाबेस के लिए, परिनियोजन योग्य अनुप्रयोगों के लिए, उन्हें ग्रैफाना में एकीकृत कर सकते हैं और एक स्वैच्छिक जानकारीपूर्ण पैनल बना सकते हैं। दुर्भाग्य से, आप एज़्योर के साथ ऐसा करने में सक्षम नहीं होंगे, और मुझे नहीं लगता कि Microsoft इस हद तक एज़्योर की कार्यक्षमता का विस्तार करना चाहता है।

हालाँकि, मेरा सुझाव है कि आप विशेष रूप से एज़्योर के साथ अपना डैशबोर्ड बनाना शुरू करें, क्योंकि आज, कम संख्या में अनुप्रयोगों के साथ काम करते हुए, आप पहले से ही एज़्योर मैट्रिक्स के साथ काम कर सकते हैं, जो कि कुछ भी नहीं करने से बेहतर है।

इसलिए, एज़्योर मॉनिटर मेट्रिक्स के साथ हमारा परिचित अंत के करीब है, और मैं अपने बारे में बताना चाहता हूं। मेरा नाम डेविड ओ ब्रायन है, और माइक्रोसॉफ्ट एमवीपी के रूप में मेरी स्थिति यह कहती है कि मैं इस सेवा के साथ काम करने में एज़्योर और प्रशिक्षण के बारे में बात करने में बहुत समय बिताता हूं।



मेरी अपनी कंपनी है, हम दुनिया भर में प्रशिक्षण पाठ्यक्रम आयोजित करते हैं, क्लाउड सेवाओं सहित विभिन्न Microsoft उत्पादों के बारे में बात करते हैं। आप ट्विटर पर मेरे संपर्क देखें, जहाँ मैं ब्लॉगिंग द्वारा सुपर सक्रिय हूं। आपको इस स्लाइड पर फोटो खिंचवाने की जरूरत नहीं है, बस आपको Xirus वेबसाइट का पता याद रखना चाहिए। आप अपने सवाल पूछ सकते हैं!

प्रश्न: मेट्रिक्स बहुत महत्वपूर्ण हैं, लेकिन आप लॉग मैनेजमेंट के बारे में क्या कह सकते हैं?

उत्तर: सिद्धांत रूप में, Azure में लॉग का प्रबंधन मेट्रिक्स के प्रबंधन के समान है। आप उन्हें अपने रिपॉजिटरी में भी रख सकते हैं, फिर उन्हें लॉग एनालिटिक्स में भेज सकते हैं और फिर मेट्रिक्स की तरह ही प्रोसेसिंग लॉग के लिए इस एप्लिकेशन का उपयोग कर सकते हैं। आप लॉग एकत्र कर सकते हैं और उन्हें मशीन के बाहर स्टोर कर सकते हैं, उन्हें कंटेनरों में रख सकते हैं और फिर उन्हें सही जगह पर केन्द्रित कर सकते हैं।

प्रश्न: क्या यह स्वचालित रूप से या प्रोग्रामेटिक रूप से किया जा सकता है?

उत्तर: किसी भी तरह से। चलिए वापस Azure Cloud Shell पर जाते हैं - आप देखते हैं कि यहाँ मेट्रिक्स अनुभाग में एक सेवा है जो मेट्रिक्स को लॉग के रूप में प्रस्तुत कर सकती है। उदाहरण के लिए, मैं एक त्रुटि टेम्पलेट बना सकता हूं और इस सेवा को बता सकता हूं: "कृपया इन लॉग को यहां पोस्ट करें"। इस डेमो के दौरान, मैंने आपको Azure के साथ काम करने के लिए सरल विकल्प दिखाए, हालांकि, वास्तविक दुनिया की स्थितियों में, कृपया इन टेम्पलेट्स का उपयोग करें। आप इस विधि का उपयोग सीएलआई कमांड लाइन इंटरफेस या किसी अन्य सुविधाजनक तरीके से कर सकते हैं। यदि आप टेम्प्लेट और JSON नहीं लिखना चाहते हैं, तो आप HTTL टेम्प्लेट लिखने के लिए खुले इंजन का उपयोग कर सकते हैं, Microsoft यह अनुमति देता है।



और कोई प्रश्न नहीं? इस समय को मेरे साथ बिताने के लिए धन्यवाद!

विज्ञापन का एक सा :)

हमारे साथ रहने के लिए धन्यवाद। क्या आप हमारे लेख पसंद करते हैं? अधिक दिलचस्प सामग्री देखना चाहते हैं? एक ऑर्डर देकर या $ 4.99 से डेवलपर्स के लिए अपने दोस्तों के क्लाउड-आधारित VPS की अनुशंसा करके हमें समर्थन दें, आपके द्वारा आविष्कार किया गया एंट्री-लेवल सर्वर का एक अनूठा एनालॉग: VPS (KVM) E5-2697 3 (6 करोड़) 10GB DDR4 480GB SSD 1Gbps के बारे में पूरी सच्चाई $ 19 या सर्वर को कैसे विभाजित करें? (विकल्प RAID1 और RAID10 के साथ उपलब्ध हैं, 24 कोर तक और 40GB DDR4 तक)।

डेल R730xd एम्स्टर्डम में इक्विनिक्स टीयर IV डेटा सेंटर में 2 गुना सस्ता? केवल हमारे पास 2 x Intel TetraDeca-Core Xeon 2x E5-2697v3 2.6GHz 14C 64GB DDR4 4x960GB SSD 1Gbps 100 TV नीदरलैंड के 199 डॉलर में से है!डेल R420 - 2x E5-2430 2.2Ghz 6C 128GB DDR3 2x960GB SSD 1Gbps 100TB - $ 99 से! इन्फ्रास्ट्रक्चर Bldg का निर्माण कैसे करें के बारे में पढ़ें । एक पैसा के लिए 9,000 यूरो की लागत डेल R730xd E5-2650 v4 सर्वर का उपयोग कर वर्ग सी?