मितोजेन के साथ अन्सिबल स्पीड

Ansible सबसे लोकप्रिय कॉन्फ़िगरेशन प्रबंधन प्रणालियों में से एक बन गया है । 2015 में Red Hat को खरीदे जाने के बाद, परियोजना प्रतिभागियों की संख्या हजारों से अधिक हो गई और Ansible शायद सबसे अधिक इस्तेमाल की जाने वाली तैनाती और ऑर्केस्ट्रेशन प्रणाली थी। इसके व्यापक अनुप्रयोग बहुत प्रभावशाली हैं।

सुदूर मेजबान के लिए SSH कनेक्शन के माध्यम से कार्य करता है। वह एक एसएसएच सत्र खोलता है, एक लॉगिन बनाता है, नेटवर्क पर पायथन कोड की प्रतिलिपि बनाता है और इसे एक अलग अस्थायी फ़ाइल में लिखता है। उसके बाद, वह इस फाइल को रिमोट मशीन पर चलाता है। संचालन का यह पूरा क्रम काफी लंबा और थकाऊ है, इसलिए इसे अनुकूलित करने के विभिन्न तरीके हैं।

इनमें से एक तरीका एसएसएच पाइपलाइन है जो आपको हर बार एक नया सत्र खोलने के बजाय निर्देशों को निष्पादित करने के लिए एक एसएसएच सत्र का उपयोग करने की अनुमति देता है, जो हमें बहुत समय बचा सकता है। (बस रिमोट मशीन में अपने /etc/sudoers फ़ाइल में sudo के लिए आवश्यक requiretty को अक्षम करने के लिए याद रखें)

"ओवरक्लॉक" करने के लिए एक नया तरीका है, मिस्टोजेन नामक अजगर पुस्तकालय के साथ है। अगर किसी ने इसके बारे में नहीं सुना है, तो मैं संक्षेप में इसकी कार्यक्षमता का वर्णन करूंगा। यह एक दूरस्थ मशीन पर अजगर कोड के तेजी से निष्पादन की अनुमति देता है, और Ansible सिर्फ एक उपयोग का मामला है। मिटोजेन एक रिमोट मशीन पर एक यूनिक्स पाइप का उपयोग करता है और पाइथन कोड को संपीड़ित ज़लीब और अचार का उपयोग करके क्रमबद्ध करता है। यह इसे तेजी से निष्पादित करने में मदद करता है और ट्रैफ़िक बचाता है। यदि आप अधिक विस्तृत विवरण में रुचि रखते हैं, तो इसके बारे में पढ़ना सबसे अच्छा है कि यह कैसे काम करता है पृष्ठ पर है। लेकिन आज हम केवल एन्सिबल के साथ लाइब्रेरी पर ध्यान केंद्रित करेंगे।

कुछ परिस्थितियों में माइटोजन कई बार आपके Ansible कोड को तेज़ कर सकता है और ट्रैफ़िक खपत को काफी कम कर सकता है। आइए सबसे लोकप्रिय उपयोग के मामलों की जांच करें और देखें कि यह कैसे हमारी मदद करता है।

मैं इसके लिए सबसे अधिक उपयोग करने योग्य है: एक दूरस्थ मशीन पर विन्यास फाइल बनाना, संकुल स्थापित करना, दूरस्थ मशीन से फाइल की नकल करना। शायद आपके पास अन्य उदाहरण हैं - टिप्पणियों में लिखें।

चलो चलते हैं!

Ansible के लिए मिटोजन का विन्यास बहुत सरल है:
मिटोजन लाइब्रेरी स्थापित करें:

 pip install mitogen 

अब दो समतुल्य तरीके हैं - या तो ansible.cfg कॉन्फ़िगरेशन फ़ाइल में विकल्प कॉन्फ़िगर करने के लिए, या आवश्यक पर्यावरण चर सेट करने के लिए।

मान लीजिए कि स्थापित मितोजन का मार्ग /usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy । तब:

 export ANSIBLE_STRATEGY_PLUGINS=/usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy export ANSIBLE_STRATEGY=mitogen_linear 

या

 [defaults] strategy = mitogen_linear strategy_plugins = /usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy 

Miten के साथ और बिना virtualenv में Ansible स्थापित करें:

 virtualenv mitogen_ansible ./mitogen_ansible/bin/pip install ansible==2.7.10 mitogen virtualenv pure_ansible ./pure_ansible/bin/pip install ansible==2.7.10 

कृपया ध्यान दें कि मितोजेन 0.2.7 Ansible 2.8 (मई 2019 तक) के साथ काम नहीं करता है

हम उपनाम:

 alias pure-ansible-playbook='$(pwd)/pure_ansible/bin/ansible-playbook' alias mitogen-ansible-playbook='ANSIBLE_STRATEGY_PLUGINS=$(pwd)/mitogen_ansible/lib/python3.7/site-packages/ansible_mitogen/plugins/strategy ANSIBLE_STRATEGY=mitogen_linear $(pwd)/mitogen_ansible/bin/ansible-playbook' 

अब रिमोट मशीन पर फाइल बनाने वाली प्लेबुक चलाने की कोशिश करें:

 --- - hosts: all gather_facts: false tasks: - name: Create files with copy content module copy: content: | test file {{ item }} dest: ~/file_{{ item }} with_sequence: start=1 end={{ n }} 

और 10 फाइलें बनाने के लिए मितोजन के साथ और उसके बिना चलाएं:

 time mitogen-ansible-playbook file_creation.yml -i hosts -en=10 &>/dev/null real 0m2.603s user 0m1.152s sys 0m0.096s time pure-ansible-playbook file_creation.yml -i hosts -en=10 &>/dev/null real 0m5.908s user 0m1.745s sys 0m0.643s 

हम 2-गुना सुधार देखते हैं। आइए 20, 30, ..., 100 फाइलों की जांच करें:

 time pure-ansible-playbook file_creation.yml -i hosts -en=100 &>/dev/null real 0m51.775s user 0m8.039s sys 0m6.305s time mitogen-ansible-playbook file_creation.yml -i hosts -en=100 &>/dev/null real 0m4.331s user 0m1.903s sys 0m0.197s 

नतीजतन, हमने निष्पादन को 10 से अधिक बार तेज कर दिया!
अब विभिन्न परिदृश्यों को आज़माते हैं और देखते हैं कि सब कुछ हमारे लिए कितना तेज़ काम करता है:

• स्थानीय (दूरस्थ मॉड्यूल के साथ) से दूरस्थ होस्ट में फ़ाइलों को कॉपी करने के लिए स्क्रिप्ट:
  

  
  

• copy मॉड्यूल के साथ दूरस्थ होस्ट पर फ़ाइलें बनाने के लिए स्क्रिप्ट:
  

  
  

• दूरस्थ होस्ट से स्थानीय में फ़ाइलों को डाउनलोड करने वाला परिदृश्य:
  

  
  

• जिनजा में कुछ चर और गणनाओं के साथ एक समर्पित मेजबान पर टेम्पलेट बनाने के साथ स्क्रिप्ट
  

  
  

आइए कई (3) दूरस्थ मशीनों के साथ एक परिदृश्य का प्रयास करें, उदाहरण के लिए, दूरस्थ मेजबान की फ़ाइलों की प्रतिलिपि बनाने वाला एक परिदृश्य:

जैसा कि आप देख सकते हैं, इन परिदृश्यों में मितोजन हमें समय और यातायात दोनों बचाता है। लेकिन अगर "अड़चन" Ansible में नहीं है, लेकिन उदाहरण के लिए I / O डिस्क या नेटवर्क में, या कहीं और, तो यह उम्मीद करना मुश्किल है कि Mitogen हमारी मदद करेगा।

चलो पाइप का उपयोग करके यम / डीएनएफ और अजगर मॉड्यूल के साथ पैकेज स्थापित करने के लिए एक स्क्रिप्ट का प्रयास करें। पैकेज कैश किए गए थे ताकि नेटवर्क में ग्लिच पर निर्भर न हों:

 --- - hosts: all gather_facts: false tasks: - name: Install packages become: true package: name: - samba - httpd - nano - ruby state: present - name: Install pip modules become: true pip: name: - pytest-split-tests - bottle - pep8 - flask state: present 

मितोजेन के साथ, इसके बिना 12 सेकंड लगे।
मित्रोजेन के लिए Ansible पृष्ठ पर, आप अन्य बेंचमार्क और परीक्षण देख सकते हैं। जैसा कि पृष्ठ पर कहा गया है:

जब यह निष्पादित होता है तो माइटोजन एक मॉड्यूल को गति नहीं दे सकता है। यह केवल इस मॉड्यूल के निष्पादन को यथासंभव तेज कर सकता है।

इसलिए, तैनाती में अपनी अड़चनों को खोजना महत्वपूर्ण है और यदि वे अन्सिबल के कारण हैं, तो मितोजेन आपको उन्हें हल करने में मदद करेगा और आपकी प्लेबुक के निष्पादन में काफी तेजी लाएगा।

संपादित करें: टेम्प्लेट के साथ स्क्रिप्ट जोड़ी गई