डेवलपर की सेवा में सेलेनियम वेबड्राइवर

बैकएंड-कहानियों के साथ दिमित्री कोस्टिचेव की रिपोर्ट का डिकोडिंग // वीडियो संस्करण

अगर आपको अचानक किसी तीसरे पक्ष के इंटरनेट संसाधन पर एकीकृत करने की आवश्यकता है और इसका पता लगाने का कोई समय नहीं है, तो सेलेनियम बचाव के लिए आएगा। दिमित्री कोस्टिचव ने अपनी परियोजना के उदाहरण पर बताया कि आपकी सेवा को छोड़ने के बिना ब्राउज़र में काम को कैसे स्वचालित किया जाए।

सभी को नमस्कार। मेरा नाम दिमित्री है और आज मैं बैकएंड विकास में सेलेनियम का उपयोग करने के अपने अनुभव को साझा करूंगा। यह किस लिए है? कुछ इंटरनेट डेटा में भरने वाले मानव कारकों को समतल करने के लिए, कुछ इंटरनेट संसाधनों के साथ बातचीत को स्वचालित करने के लिए सेलेनियम की आवश्यकता होती है। विकास के लिए, ऐसे मामलों में यह आवश्यक हो सकता है जब, उदाहरण के लिए, इंटरनेट संसाधन और इतने पर कोई एपीआई नहीं है। और मेरी परियोजना के उदाहरण पर, कार्य क्लाइंट डेटा को भरना था (इससे पहले कि सेवा को सभी जानकारी को सही ढंग से तैयार करना था) और उन्हें इस साइट पर पंजीकृत करें, इस मामले में मास्टरकार्ड।



इस साइट पर आगे विचार करने पर, यह पता चला कि कोई एपि नहीं है, जिससे हम बाहर तक पहुँच सकें और सब कुछ कर सकें। सभी प्रसंस्करण जेएस-लिपियों में किया जाता है, जिसमें कुछ भी स्पष्ट नहीं है और डेटा सभी एन्कोडेड है। निर्णय किया गया - इन उद्देश्यों के लिए सेलेनियम की कोशिश करने के लिए, अर्थात्, हम अपनी पूरी सेवा सेलेनियम को उपवास करेंगे, जो कुछ निश्चित समय पर इस पंजीकरण को पूरा करेगा।

अंत में, सेलेनियम क्या है और इसके साथ कैसे काम करना है? सेलेनियम परियोजना में एक पुस्तकालय होता है जो एक विशिष्ट ब्राउज़र के लिए वेब ड्राइवर इंटरफ़ेस के साथ संचार करता है। उपलब्ध पुस्तकालयों और ब्राउज़रों की एक सूची स्लाइड पर दिखाई गई है। और अब मैं दिखाऊंगा कि यह कैसे मोटे तौर पर मेरी परियोजना पर काम करता है। पोस्ट के अंत में

एक पेंचकस या एक विस्तृत वीडियो देखें।

अब सेवा एक फ़ाइल उत्पन्न करेगी, तुरंत इसे इस साइट पर अपलोड करें और जांचें कि क्या सब कुछ सफलतापूर्वक पंजीकृत किया गया है। यहाँ, वास्तव में, वह glues, भार और इतने पर। और अब वह शायद इस तथ्य पर कूद जाएगा कि सब कुछ सफल होगा। स्वचालन काफी तेज़ है और इसके लिए किसी बड़े संसाधन की आवश्यकता नहीं है। सब कुछ, जाहिरा तौर पर, पूरी तरह से पंजीकृत था।

यह सब कैसे पकाने के लिए? सेलेनियम पुस्तकालय में इस तरह के मूल आदेश हैं:

• एक विशिष्ट ब्राउज़र के लिए एक इंस्टेंस वेब ड्राइवर बनाना;
• लिंक क्लिक;
• तत्वों के साथ काम करें: क्लिक, आदि।

वेब ड्राइवर आपको सामान्य ब्राउज़र की तरह सत्र और कुकी प्राप्त करने की अनुमति देता है। आप उन्हें बदल भी सकते हैं और अपने लिए अनुकूलित भी कर सकते हैं। आप पृष्ठ पर js स्क्रिप्ट निष्पादित कर सकते हैं। एक पुस्तकालय है जो स्वयं सेलेनियम की इस कार्यक्षमता का विस्तार करता है, जिसे सेलेनाइड कहा जाता है। इसकी मुख्य विशेषता इंस्टेंस ड्राइवरों के निर्माण को छिपाना है। एक उदाहरण के रूप में, हम देखते हैं कि हम बस खुले कमांड को कॉल करते हैं, किसी प्रकार का लिंक देते हैं और ब्राउज़र पहले से ही शुरू हो रहा है, कुछ भी कॉन्फ़िगर करने की आवश्यकता नहीं है। और पुस्तकालय तत्वों के साथ काम का विस्तार करता है, कुछ अतिरिक्त प्रीसेट। यह सब सुविधाजनक लगता है, आप जल्दी से इसका पता लगा सकते हैं और इसका उपयोग कर सकते हैं।

ऑनलाइन संसाधनों के साथ काम करते समय, और अंततः सेलेनियम के साथ, कुछ डिज़ाइन पैटर्न होते हैं। और उनमें से एक पेज ऑब्जेक्ट है। इसका सार इस तथ्य में निहित है कि हम एक निश्चित वर्ग में इन सभी तत्वों का वर्णन करते हैं। और फिर हम इसका पुन: उपयोग कर सकते हैं और यह आसान लग रहा है। यहाँ कुछ इस तरह है: हम खुले कमांड को कहते हैं, पेज ऑब्जेक्ट्स क्लास देते हैं और फिर हम इसके सभी तरीकों का उपयोग कर सकते हैं, उदाहरण के लिए, तत्वों के साथ काम करना।



हम HTML पेज के DOM मॉडल के द्वारा चयनकर्ताओं जैसे xpath, css और अन्य द्वारा तत्वों की खोज करते हैं। उनके मुख्य अंतर, उदाहरण के लिए xpath और css के बीच, यह है कि xpath "डीप" जा सकता है, साथ ही साथ ऊपर और नीचे। और सीएसएस, इसके विपरीत, केवल नीचे है। यानी ये सबसे ज्यादा इस्तेमाल होने वाले चयनकर्ता हैं।



अंततः, हमें सीधे एक ब्राउज़र की आवश्यकता होती है, जिसे सेलेनॉइड सीधे हमारी मदद कर सकता है। संक्षेप में, यह एक ढांचा है जो ब्राउज़रों के साथ इन कंटेनरों के निर्माण और संशोधन को नियंत्रित करता है। लेकिन यह लोडेड सिस्टम के लिए अधिक डिज़ाइन किया गया है जहाँ ये ब्राउज़र बड़ी संख्या में बनाए गए हैं। और हमारी स्थिति में, इसकी बहुत आवश्यकता नहीं है, लेकिन केवल कंटेनर का ही उपयोग करें। और अब मैं दिखाऊंगा कि सर्वर पर यह कैसे काम करना चाहिए।

दरअसल, पेज की इंटरैक्शन कुछ इस तरह दिखती है, यह एक काफी रैखिक डेटा प्रोसेसिंग है। इस मामले में, मैं चरणों में विभाजित हूं - पृष्ठों के लिए संक्रमण। यह वह जगह है जहां डेटा पॉपुलेटेड है और, सीधे, फ़ाइलों द्वारा डाउनलोड किया जाता है। सिद्धांत रूप में, सब कुछ काफी सरल है। यह वही है जो एक पेजोबिज-क्लास जैसा दिखता है, एक डीटीओ की काफी याद दिलाता है। हम बस तत्वों का वर्णन करते हैं, उदाहरण के लिए, यहां पीसीएसएस सिलेक्टम के वर्तमान मामले में। यह सेलेनाइड का वाक्य विन्यास है।



काम करने के लिए, हमें डॉकटर कंटेनर से कनेक्ट करने के लिए रिमोट ड्राइवर का विवरण चाहिए। मुख्य सेटिंग्स जिन्हें आपको प्राप्त करने की आवश्यकता है वे ब्राउज़र हैं जो हम उपयोग करेंगे और वास्तव में, ब्राउज़र के लिए रिज़ॉल्यूशन और अन्य महत्वपूर्ण लाइनें। लेकिन डॉकटर कंटेनर के साथ काम करने के लिए, आपको हेडलेस मोड जैसी सेटिंग्स की भी आवश्यकता होगी। यही है, अपने वर्तमान रूप में, यह सर्वर पर स्पिन करेगा। यह मोड ब्राउज़र में ग्राफिक्स को निष्क्रिय कर देता है, इसलिए यह तेजी से काम करेगा और कम संसाधन लेगा।

आगे यह कोई सैंडबॉक्स नहीं होगा, जो इस मामले में क्रोमियम सुरक्षा द्वारा अक्षम है, और यह आपके स्वयं के कोड, जेएस या अन्य को निष्पादित करना संभव होगा। क्रोमियम के लिए सामान्य रूप से यूनिक्स मशीनों पर काम करने के लिए तीसरे पैरामीटर की आवश्यकता होती है, सही ढंग से टेम्पो फाइलों को रिकॉर्ड करना। और चौथे, वास्तव में, फाइलों को अपलोड करने के लिए हमारी जरूरत है। और सबसे महत्वपूर्ण बात, रिमोट ड्राइवर में एक झंडा होता है जो आपको स्थानीय स्टोरेज से एक फ़ाइल डाउनलोड करने की अनुमति देता है जहां एप्लिकेशन चल रहा है, पहले से ही निकालें ड्राइवर के माध्यम से।



अब मैं दिखाऊंगा कि यह डॉकटर कंटेनर के साथ कैसे काम करता है। डॉकटर कंटेनर और एप्लिकेशन को ही डाउनलोड करें। इसे भी लगभग उसी तरह से लॉन्च किया जाएगा, यानी सिद्धांत रूप में, कोई नई बात नहीं होगी। केवल यहां हम कुछ प्रकार के लॉग में इंटरैक्शन देखेंगे। सिद्धांत रूप में, उनकी निगरानी भी की जा सकती है, उनके साथ काम किया जा सकता है, और इसी तरह। इसलिए, आप उस बातचीत को समझ सकते हैं जो हो रही है। यह क्रोमियम के साथ डॉकटर कंटेनर से सीधे आउटपुट है जहां ब्राउज़र है।



सिद्धांत रूप में, डॉकटर कंटेनर के साथ सब कुछ पूरी तरह से काम करता है। साथ ही, सब कुछ जांच लिया जाता है और पंजीकरण सफलतापूर्वक पूरा हो जाता है। आगे, ऐसे दृष्टिकोण में किन सामान्य समस्याओं का सामना किया जा सकता है? मुझे अज्ञानता के रूप में इतनी समस्या नहीं थी। डॉक कंटेनर में फ़ाइल स्थानांतरण, हमेशा की तरह, सब कुछ - वॉल्यूम की बारी। लेकिन इस मामले में, यदि आप अभी भी स्थानीय रूप से चलाना चाहते हैं, तो आपको प्रोजेक्ट के लिए दो कॉन्फ़िगरेशन होना चाहिए, लेकिन, जैसा कि यह निकला, रिमोट ड्राइवर को ध्वज के माध्यम से कॉन्फ़िगर किया जा सकता है। वह सीधे इस फ़ाइल को स्वयं के माध्यम से स्थानांतरित कर सकता है, और अतिरिक्त इशारों की आवश्यकता नहीं है।

आपको उस पृष्ठ का भी पालन करना होगा जिसके साथ हम काम करते हैं - एक ऑनलाइन संसाधन। क्योंकि, मेरे मामले में, यह एक और प्रणाली है, जिसमें किसी का मेरी टीम से कोई संबंध नहीं है, और इस पर भी नजर रखने की जरूरत है, लॉग द्वारा निगरानी की जाती है, और इसी तरह। ब्राउज़र के साथ के रूप में, यह लगातार अद्यतन किया जाता है, आपको इसकी निगरानी करने की आवश्यकता है, समर्थन ड्रॉप हो सकता है। ठीक है, सिद्धांत रूप में, आप किसी तरह लॉग को कॉन्फ़िगर कर सकते हैं और कोई समस्या नहीं होगी।

अंत में, यह कितना आसान हो गया है? ऐसा लग रहा था कि मैं इस साइट के साथ बातचीत करने की समस्या को बहुत तेजी से हल करने में सक्षम था, अगर मुझे js कोड पता था। यही है, सेलेनियम को समझने के लिए और बातचीत इस तथ्य से तेज हो सकती है कि डेटा एन्कोडेड है और यह ज्ञात नहीं है कि इसे वापस कैसे ट्रांसकोड किया जाए। विकास में मुख्य बात गति है।

रिपोर्ट वीडियो - 16.30 से