👩‍🚒 👩🏼‍🤝‍👨🏿 🛩️ कुबेकॉस्ट बादलों में कुबेरनेट्स पर पैसे बचाने के लिए समीक्षा करते हैं 🕎 👨🏽‍🎓 👴🏾

वर्तमान में, अधिक से अधिक कंपनियां अपने बुनियादी ढांचे को लोहे के सर्वर और अपनी स्वयं की आभासी मशीनों से बादलों तक ले जा रही हैं। इस तरह के एक समाधान की व्याख्या करना आसान है: हार्डवेयर की देखभाल करने की कोई आवश्यकता नहीं है, क्लस्टर आसानी से कई अलग-अलग तरीकों से कॉन्फ़िगर किया गया है ... और सबसे महत्वपूर्ण बात, उपलब्ध प्रौद्योगिकियां (जैसे कुबेरनेट्स) लोड के आधार पर कंप्यूटिंग शक्ति को स्केल करना आसान बनाती हैं।

वित्तीय पहलू हमेशा महत्वपूर्ण होता है। इस आलेख में जिस टूल पर चर्चा की जाएगी, वह कुबेरनेट्स के साथ क्लाउड बुनियादी ढांचे का उपयोग करते समय बजट को कम करने में मदद करने के लिए डिज़ाइन किया गया है।

परिचय

कुबेकॉस्ट Google का एक कैलिफ़ोर्निया-आधारित स्टार्टअप है जो क्लाउड सेवाओं (कुबेरनेट्स क्लस्टर + साझा संसाधनों के अंदर) में बुनियादी ढांचे की लागत की गणना करने के लिए एक समाधान बनाता है, क्लस्टर सेटिंग्स में अड़चनें ढूंढता है, और स्लैक को उचित सूचनाएं भेजता है।

हमारे पास कुबेरनेट्स के साथ परिचित AWS और GCP बादल दोनों के साथ-साथ दुर्लभ Azure Linux समुदाय के ग्राहक हैं - सामान्य तौर पर, Kubecost द्वारा समर्थित सभी प्लेटफार्मों पर। उनमें से कुछ के लिए, हम अपने दम पर इंट्रा-क्लस्टर सेवाओं की लागत पर विचार करते हैं (कुबेकोस्ट द्वारा उपयोग की जाने वाली तकनीक के समान), साथ ही साथ बुनियादी ढांचे की लागत की निगरानी करते हैं और उन्हें अनुकूलित करने का प्रयास करते हैं। इसलिए, यह तर्कसंगत है कि हम ऐसे कार्यों को स्वचालित करने की क्षमता में रुचि रखते थे।

मुख्य Kubecost मॉड्यूल का स्रोत कोड ओपन सोर्स-लाइसेंस (Apache लाइसेंस 2.0) की शर्तों के तहत खुला है। इसका उपयोग स्वतंत्र रूप से किया जा सकता है, और उपलब्ध फ़ंक्शन छोटी परियोजनाओं के लिए पर्याप्त होना चाहिए। हालांकि, व्यवसाय व्यवसाय है: उत्पाद के बाकी हिस्से को बंद कर दिया गया है, इसका उपयोग सशुल्क सदस्यता के लिए किया जा सकता है, जो वाणिज्यिक समर्थन भी प्रदान करता है। इसके अलावा, लेखक छोटे समूहों के लिए एक मुफ्त लाइसेंस प्रदान करते हैं ( ~~10 नोड्स के~~ साथ 1 क्लस्टर - इस लेख के लेखन के दौरान, यह सीमा 20 नोड तक विस्तारित हो गई है) या 1 महीने के लिए पूर्ण क्षमताओं के साथ परीक्षण अवधि।

यह कैसे काम करता है

तो, कुबेकोस्ट का थोक गो में लिखा गया एक लागत-मॉडल अनुप्रयोग है। हेल्म चार्ट, जो पूरे सिस्टम का वर्णन करता है, को लागत-विश्लेषक कहा जाता है और अनिवार्य रूप से प्रोमेथियस, ग्राफाना और कई डैशबोर्ड के साथ एक लागत-मॉडल विधानसभा है।

आम तौर पर बोलना, कॉस्ट-मॉडल का अपना वेब इंटरफ़ेस होता है, जो एक टेबुलर रूप में लागतों पर ग्राफ़ और विस्तृत आंकड़े प्रदर्शित करता है, साथ ही, निश्चित रूप से, लागतों के अनुकूलन पर सुझाव भी देता है। ग्राफाना में प्रस्तुत डैशबोर्ड कुबकोस्ट के विकास में एक पुराना चरण है और इसमें लागत-मॉडल के समान डेटा होते हैं, जो कि क्लस्टर और इसके घटकों में सीपीयू / मेमोरी / नेटवर्क / डिस्क स्थान की खपत पर सामान्य आँकड़ों के साथ पूरक होते हैं।

कुबेकोस्ट कैसे काम करता है?

क्लाउड प्रदाता एपीआई के माध्यम से लागत-मॉडल सेवा की कीमतें प्राप्त करता है।
इसके अलावा, नोड और क्षेत्र के लोहे के प्रकार के आधार पर, नोड्स की लागत पर विचार किया जाता है।
नोड्स के काम की लागत के आधार पर, प्रत्येक अंतिम पॉड में प्रोसेसर का उपयोग करने की प्रति घंटे की लागत, मेमोरी की एक गीगाबाइट खर्च करने और डेटा के एक गीगाबाइट को संग्रहीत करने के एक घंटे की लागत प्राप्त होती है - उस नोड के आधार पर जिस पर यह काम किया था, या भंडारण वर्ग।
व्यक्तिगत पॉड्स के काम की लागत के आधार पर, नामस्थान, सेवाओं, तैनाती, स्टेटफुलसेट्स के लिए भुगतान पर विचार किया जाता है।
आंकड़ों की गणना करने के लिए, क्यूब-स्टेट-मेट्रिक्स और नोड-निर्यातक द्वारा प्रदान किए गए मीट्रिक का उपयोग किया जाता है।

यह ध्यान रखना महत्वपूर्ण है कि कुबेकॉस्ट केवल डिफ़ॉल्ट रूप से कुबेरनेट में उपलब्ध संसाधनों पर विचार करता है । बाहरी डेटाबेस, GitLab सर्वर, S3 रिपॉजिटरी, और अन्य सेवाएँ जो क्लस्टर में नहीं हैं (उसी क्लाउड में स्थित) इसके लिए दृश्यमान नहीं हैं। यद्यपि GCP और AWS के लिए, आप अपने सेवा खातों की कुंजी जोड़ सकते हैं और सब कुछ एक साथ गणना कर सकते हैं।

स्थापना

Kubecost कार्य करने के लिए, आपको आवश्यकता है:

कुबेरनेट्स संस्करण 1.8 और उच्चतर;
Kube राज्य-मीट्रिक;
प्रोमेथियस;
नोड निर्यातक।

ऐसा हुआ कि हमारे समूहों में इन सभी स्थितियों को पहले से ही पूरा किया गया था, इसलिए यह केवल प्रोमेथियस तक पहुंच के लिए सही समापन बिंदु निर्दिष्ट करने के लिए पर्याप्त निकला। फिर भी, आधिकारिक कुबेकॉस्ट हेल्म-चार्ट में वह सब कुछ शामिल है जो आपको नंगे क्लस्टर पर शुरू करने की आवश्यकता है।

कुबेकोस्ट को स्थापित करने के कई तरीके हैं:

डेवलपर की वेबसाइट पर निर्देशों में वर्णित मानक स्थापना विधि। आपको लागत-विश्लेषक रिपॉजिटरी को हेल्म में जोड़ने की आवश्यकता है , और फिर चार्ट स्थापित करें । यह केवल पोर्ट को अग्रेषित करने और मैन्युअल रूप से वांछित स्थिति (kubectl के माध्यम से) और / या लागत-मॉडल वेब इंटरफ़ेस का उपयोग करने के लिए सेटिंग्स को समाप्त करने के लिए बनी हुई है।

हमने यह तरीका आजमाया भी नहीं है, क्योंकि हम तीसरे पक्ष के तैयार-किए गए कॉन्फ़िगरेशन का उपयोग नहीं करते हैं, हालांकि यह एक अच्छा विकल्प "बस अपने लिए प्रयास करें" जैसा दिखता है। यदि आपके पास पहले से ही सिस्टम के कुछ घटक स्थापित हैं या आप अधिक ठीक-ट्यूनिंग चाहते हैं, तो दूसरे तरीके पर विचार करना बेहतर है।
अनिवार्य रूप से एक ही चार्ट का उपयोग करें , लेकिन स्वतंत्र रूप से कॉन्फ़िगर करें और इसे किसी भी सुविधाजनक तरीके से स्थापित करें ।

जैसा कि पहले ही उल्लेख किया गया है, कुबेकॉस्ट के अलावा, इस चार्ट में ग्राफाना और प्रोमेथियस चार्ट शामिल हैं, जिन्हें आप अपनी इच्छानुसार अनुकूलित भी कर सकते हैं।

मूल्य-विश्लेषक चार्ट पर उपलब्ध लागत-विश्लेषक के लिए चार्ट आपको कॉन्फ़िगर करने की अनुमति देता है:
- तैनात किए जाने वाले लागत-विश्लेषक घटकों की सूची;
- प्रोमेथियस के लिए आपका समापन बिंदु (यदि आपके पास पहले से ही एक है);
- डोमेन और लागत-मॉडल और ग्राफाना के लिए अन्य प्रवेश सेटिंग्स;
- फली के लिए एनोटेशन;
- स्थायी भंडारण और उनके आकार की आवश्यकता।
विवरण के साथ उपलब्ध कॉन्फ़िगरेशन विकल्पों की पूरी सूची प्रलेखन में है ।

चूंकि मूल संस्करण में kubecost पहुंच को प्रतिबंधित करने में सक्षम नहीं है, इसलिए आपको तुरंत वेब पैनल के लिए मूल-नीति को कॉन्फ़िगर करना होगा।
सिस्टम का केवल कोर स्थापित करें - लागत-मॉडल। ऐसा करने के लिए, आपके पास प्रोमेथियस क्लस्टर में स्थापित होना चाहिए और हेलम के लिए prometheusEndpoint चर में इसके पते के संबंधित मूल्य को निर्दिष्ट करना होगा। उसके बाद, क्लस्टर में YAML कॉन्फ़िगरेशन के सेट को लागू करें।

फिर से, आपको मैन्युअल रूप से Ingress को Basic-Cort से जोड़ना होगा। और अंत में, आपको प्रोमेथिह कॉन्फ़िगरेशन में extraScrapeConfigs में लागत-मॉडल मीट्रिक इकट्ठा करने के लिए एक अनुभाग जोड़ने की आवश्यकता है:
```
 - job_name: kubecost honor_labels: true scrape_interval: 1m scrape_timeout: 10s metrics_path: /metrics scheme: http dns_sd_configs: - names: - <   kubecost> type: 'A' port: 9003 
```

हमें क्या मिलता है?

एक पूर्ण स्थापना के साथ, हमारे पास डैशबोर्ड के एक सेट के साथ वेब पैनल kubecost और Grafana है।

मुख्य स्क्रीन पर प्रदर्शित कुल लागत वास्तव में महीने के लिए संसाधनों की अनुमानित लागत को दर्शाती है। यह अनुमानित मूल्य है जो संसाधन खपत के मौजूदा स्तर पर क्लस्टर (प्रति माह) का उपयोग करने की लागत को प्रदर्शित करता है।

यह मीट्रिक लागत विश्लेषण और अनुकूलन के लिए अधिक है। कुबेस्टोस्ट में सार जुलाई के लिए कुल लागत को देखना बहुत सुविधाजनक नहीं है: इसके लिए आपको बिलिंग पर जाना होगा। लेकिन आप 1/2/7/30/90 दिनों के लिए नेमस्पेस, लेबल, पॉड द्वारा लागत देख सकते हैं, जो बिलिंग आपको कभी नहीं दिखाएगी।

लेबल की बात हो रही है। आपको तुरंत सेटिंग्स में जाना चाहिए और उन लेबलों के नाम सेट करने होंगे जो ग्रुपिंग कॉस्ट के लिए अतिरिक्त श्रेणियों के रूप में उपयोग किए जाएंगे:

आप उन पर कोई भी लेबल लटका सकते हैं - यह सुविधाजनक है यदि आपके पास पहले से ही अपना लेबलिंग सिस्टम है।

वहां आप एंडपॉइंट एपीआई पते को भी बदल सकते हैं जिसमें लागत-मॉडल जोड़ता है, जीसीपी में छूट का आकार कॉन्फ़िगर करें और उन्हें मापने के लिए संसाधनों और मुद्रा के लिए अपनी खुद की कीमतें निर्धारित करें (किसी कारण से, सुविधा कुल लागत को प्रभावित नहीं करती है)।

Kubecost क्लस्टर में विभिन्न समस्याएं दिखा सकता है (और खतरे के मामले में भी सतर्क)। दुर्भाग्य से, विकल्प कॉन्फ़िगर करने योग्य नहीं है, और इसलिए - यदि आपके पास डेवलपर वातावरण है और उनका उपयोग किया जाता है, तो आप लगातार कुछ इस तरह देख सकते हैं:

एक महत्वपूर्ण उपकरण क्लस्टर बचत है । यह फली की गतिविधि (नेटवर्क सहित संसाधनों की खपत) को मापता है, और यह भी मानता है कि कितना पैसा और क्या बचाया जा सकता है।

ऐसा लग सकता है कि अनुकूलन युक्तियाँ बहुत स्पष्ट हैं, लेकिन अनुभव बताता है कि अभी भी कुछ देखना बाकी है। विशेष रूप से, फली की नेटवर्क गतिविधि की निगरानी की जाती है (कुबेकोस्ट निष्क्रिय लोगों पर ध्यान देने की पेशकश करता है), अनुरोधित और वास्तविक मेमोरी और सीपीयू खपत की तुलना की जाती है, साथ ही क्लस्टर नोड्स द्वारा उपयोग किए जाने वाले सीपीयू (एक के बाद एक कई नोड्स, डिस्क लोड और एक दर्जन को ध्वस्त करने की पेशकश) मापदंडों।

किसी भी अनुकूलन समस्या के साथ, कुबकोस्ट डेटा पर आधारित संसाधन अनुकूलन को सावधानी से व्यवहार किया जाना चाहिए। उदाहरण के लिए, क्लस्टर सेविंग नोड्स को हटाने का सुझाव देता है, यह दावा करते हुए कि यह सुरक्षित है, लेकिन यह नोड-चयनकर्ताओं की उपस्थिति को ध्यान में नहीं रखता है और उन पर लगाए गए पॉड्स पर टेंट है जो अन्य नोड्स पर मौजूद नहीं हैं। वैसे भी, अपने हाल के लेख में उत्पाद के लेखक भी (वैसे, यह उन लोगों के लिए बहुत उपयोगी हो सकता है जो परियोजना के विषय में रुचि रखते हैं) लागत अनुकूलन में सिर के बल नहीं दौड़ने की सलाह देते हैं, लेकिन इस मुद्दे पर सोच-समझकर संपर्क करें।

परिणाम

एक-दो परियोजनाओं पर एक महीने के लिए कुबेकोस्ट का उपयोग करने के बाद, हम यह निष्कर्ष निकाल सकते हैं कि कुबेरनेट समूहों के लिए उपयोग किए जाने वाले क्लाउड प्रदाताओं की लागत का विश्लेषण और अनुकूलन करने के लिए यह एक दिलचस्प (और सीखना और स्थापित करना आसान है) उपकरण है। गणना बहुत सटीक है: हमारे प्रयोगों में, उन्होंने संयोग दिया कि प्रदाताओं को वास्तव में क्या चाहिए था।

कमियों के बिना नहीं: गैर-महत्वपूर्ण कीड़े हैं, स्थानों में कार्यक्षमता कुछ परियोजनाओं के लिए विशिष्ट आवश्यकताओं को कवर नहीं करती है। हालाँकि, अगर आपको यह समझने की ज़रूरत है कि पैसा कहाँ जाता है और आप क्या कर सकते हैं, तो "सेवाओं में लगातार 5-30% (यह हमारे मामले में हुआ) द्वारा बिल को कम करने के लिए" कटौती "कर सकते हैं, यह एक उत्कृष्ट विकल्प है।

पुनश्च

हमारे ब्लॉग में भी पढ़ें: