💒 ⏩ 👩‍🚀 सॉफ्टवेयर डेवलपर्स के लिए उपकरण: ओपन फ्रेमवर्क और मशीन लर्निंग लाइब्रेरी 👨🏽‍🎤 🕴️ 👨🏻‍🚀

ओपन सोर्स डेवलपर टूल्स की हमारी श्रृंखला जारी है। आज हम MO - ट्रांसफॉर्मर, Accord.NET और MLflow के लिए चौखटे और पुस्तकालयों के बारे में बात करते हैं।

तस्वीरें - फ्रेंक वी। - अनप्लैश

ट्रान्सफ़ॉर्मर

यह TensorFlow 2.0 और PyTorch पर एक प्राकृतिक भाषा मॉडल लाइब्रेरी है। इसमें 32 से अधिक पूर्व प्रशिक्षित मॉडल शामिल हैं - बीईआरटी, डिस्टिलबर्ट, एक्सएलएम, जीपीटी -2, एक्सएलनेट और अन्य।

लाइब्रेरी के लेखक एनएपीपी-एल्गोरिदम विकसित करने वाली कंपनी हगिंगफेस के इंजीनियर थे। यह वे थे जिन्होंने मशीन लर्निंग के पदानुक्रमित मल्टी-टास्क लर्निंग (HMTL) मॉडल को पेश किया, जिसने " भयावह भूलने " की समस्या को हल करने की दिशा में एक और कदम उठाया। एचएमटीएल को एएएआई 2019 में दिखाया गया था, जो कृत्रिम बुद्धिमत्ता प्रणालियों पर एक अंतर्राष्ट्रीय शैक्षणिक सम्मेलन था।

ट्रांसफॉर्मर्स की एक प्रमुख विशेषता प्रशिक्षित मॉडलों का आदान-प्रदान करने और उन्हें एक ढांचे से दूसरे में बदलने की क्षमता है: TF2.0 या PyTorch। डेवलपर्स ध्यान दें कि उनका समाधान हमें कोड के तीन लाइनों के साथ मॉडल के प्रशिक्षण के लिए प्रक्रिया का वर्णन करने की अनुमति देता है।

लाइब्रेरी के आसपास एक व्यापक समुदाय का गठन किया गया है - गीथहब पर लगभग 15 हजार सितारे । आप प्रोजेक्ट वेबसाइट पर खुद ट्रांसफॉर्मर्स की क्षमताओं का मूल्यांकन कर सकते हैं: डेवलपर्स ने आपके लिए प्रस्तावों को संलग्न करने के लिए तंत्रिका नेटवर्क को सिखाया।

Accord.NET

C # द्वारा धारित एक ढांचा, जो डेटा विश्लेषण और मशीन लर्निंग के लिए बुनियादी उपकरण प्रदान करता है: सांख्यिकीय परिकल्पना के परीक्षण से लेकर कंप्यूटर विज़न और इमेज प्रोसेसिंग के मॉडल तैयार करना। Accord.NET .NET पारिस्थितिकी तंत्र में सबसे लोकप्रिय MO समाधानों में से एक है। प्रारंभ में, यह AForge.NET लाइब्रेरी का विस्तार था, लेकिन फिर इसे अवशोषित कर लिया।

मॉडल के प्रदर्शन का मूल्यांकन करने के लिए उपकरण संभाव्यता वितरण, मुख्य कार्य और बेंचमार्क प्रदान करता है। Accord.NET निष्पादन योग्य मॉड्यूल, संपीड़ित अभिलेखागार या NuGet पैकेज के रूप में उपलब्ध पुस्तकालयों में विभाजित है । उनमें से हैं: गणित के साथ काम करने के लिए गणित , छवि प्रसंस्करण के लिए इमेजिंग और ध्वनि कार्यों के साथ ऑडियो । आप न्यूरो को लेवेनबर्ग - मार्क्वर्ट और गहन शिक्षण एल्गोरिदम के साथ भी उजागर कर सकते हैं।

Accord.NET का उपयोग ब्रिटेन , मिस्र , चीन और अन्य देशों के विश्वविद्यालयों के इंजीनियरों द्वारा अनुसंधान के लिए किया गया था। और सामान्य तौर पर, फ्रेमवर्क काफी बड़ी संख्या में डेवलपर्स का उपयोग करता है - इसमें गिटहब पर 3.5 हजार से अधिक सितारे हैं ।

कमियों के बीच भ्रमित करने वाले दस्तावेज़ों को प्रतिष्ठित किया जा सकता है, शुरुआती लोगों के लिए मुश्किल। यद्यपि त्वरित आरंभ मार्गदर्शिका और कोड में विस्तृत टिप्पणियों की उपलब्धता से स्थिति थोड़ी सरल हो जाती है। Accord.NET पर आगे की जानकारी साहित्य में भी मिल सकती है। डेवलपर्स स्वयं .NET लर्निंग के लिए मशीन लर्निंग प्रोजेक्ट्स की सिफारिश करते हैं, मशीन लर्निंग एसेंशियल के लिए एफ # , और कुछ अन्य ।

तस्वीरें - फ्रेंक वी। - अनप्लैश

MLflow

यह मशीन सीखने के पूर्ण चक्र, विकास को सरल बनाने, परिनियोजन और मॉडल के आदान-प्रदान के लिए एक मंच है। यह एपीआई का एक सेट प्रदान करता है जो किसी भी लाइब्रेरी (TensorFlow, PyTorch, XGBoost, आदि) और क्लाउड सहित किसी भी वातावरण में काम करता है। MLflow डेवलपर्स Databricks के प्रोग्रामर हैं, अपाचे स्पार्क के लोगों द्वारा स्थापित एक स्टार्टअप।

MLflow में डॉकर, टेन्सरफ्लो, पाइटोरेक, कुबेरनेट्स, जावा, स्पार्क और अन्य ओपन सोर्स प्रोजेक्ट्स के साथ अंतर्निहित एकीकरण हैं। इसी समय, MLflow का उपयोग Microsoft, Accenture, SK Telecom और यहां तक कि वाशिंगटन विश्वविद्यालय जैसे संगठनों द्वारा भी किया जाता है।

MLflow की कमियों के बीच, कोई भी मशीन सीखने में उनकी लोकप्रियता के बावजूद, R और Java के लिए समर्थन की कमी को दूर कर सकता है। लेकिन यहां बिंदु परियोजना के रिश्तेदार युवाओं का है, और डेवलपर्स भविष्य में उचित एपीआई जोड़ने का वादा करते हैं। साधन का युवा एक और छाप छोड़ता है - इसके काम में कीड़े हैं ।

यदि आप कार्यस्थल पर स्वतंत्र रूप से MLflow का मूल्यांकन करना चाहते हैं, तो आप आधिकारिक दस्तावेज के साथ खुद को परिचित करना शुरू कर सकते हैं। यदि आपके पास प्रश्न हैं, तो StackOverflow या Google समूह पर एक अपेक्षाकृत छोटा लेकिन सक्रिय समुदाय उनके समाधान में मदद करेगा।

^{हमारे अन्य संग्रह:} ^{कमांड लाइन के साथ काम करते समय समय की बचत करें} ^{लिनक्स पर सर्वर के लिए बेंचमार्क: खुले उपकरणों का चयन} ^{हमरी पर क्या लिखते हैं:} ^{वीएमवर्ल्ड 2019 के बारे में क्या पता है} ^{एप्लिकेशन और सेवा गोपनीयता नीतियों को समझने से तंत्रिका नेटवर्क को मदद मिलेगी} ^{ईयू अदालत डिफ़ॉल्ट रूप से कुकीज़ का विरोध करती है - कोई पूर्व-चेक किया हुआ चेकबॉक्स नहीं होना चाहिए}

हम क्लाउड सुविधा भंडारण सेवा प्रदान करते हैं । बैकअप, संग्रह और दस्तावेज़ साझाकरण के लिए।

सॉफ्टवेयर डेवलपर्स के लिए उपकरण: ओपन फ्रेमवर्क और मशीन लर्निंग लाइब्रेरी

ट्रान्सफ़ॉर्मर

Accord.NET

MLflow

More articles: