गितुब पर खोज समाधान अनुकूलन

एक बड़ी परियोजना पर काम करने की प्रक्रिया में, अन्य लोगों के मॉड्यूल और टर्नकी समाधान उधार लेने से डेवलपर समय और निवेशक के पैसे की एक बड़ी राशि बचती है। इस तरह के समाधानों का सबसे बड़ा भंडार दूर गीथूब द्वारा है।

बिल्ली के नीचे एक छोटी सी चाल है जिसे मैं जीथब समाधान खोजने और चुनने पर उपयोग करता हूं।

एक बड़े OSINT सिस्टम को विकसित करने के कार्य की कल्पना करें, मान लें कि हमें इस दिशा में गिथब पर उपलब्ध सभी समाधानों को देखने की आवश्यकता है। हम ऑसिंट कीवर्ड के लिए मानक ग्लोबल जीथब सर्च का उपयोग करते हैं। हम 1124 रिपॉजिटरी प्राप्त करते हैं, निष्पादन भाषा द्वारा कीवर्ड सर्च (कोड, कमिट, इस् यू, आदि) के स्थान को फ़िल्टर करने की क्षमता। और विभिन्न विशेषताओं के आधार पर छाँटें (जैसे अधिकांश / सबसे कम शुरू, कांटे, आदि)।

निर्णय कई मानदंडों के अनुसार किया जाता है: कार्यक्षमता, सितारों की संख्या, परियोजना समर्थन, विकास भाषा।



जिन निर्णयों में मेरी दिलचस्पी थी, उन्हें एक तालिका में संक्षेपित किया गया था जहाँ ऊपर दिए गए फ़ील्ड भरे गए थे, एक विशेष परीक्षण के परिणामों के आधार पर उपयुक्त नोट्स बनाए गए थे।

इस दृश्य का नुकसान, यह मुझे लगता है, कई क्षेत्रों में एक साथ सॉर्ट करने और फ़िल्टर करने की क्षमता की कमी है।

Api_github और python3 का उपयोग करते हुए हम एक सरल सरल स्क्रिप्ट को रेखांकित करते हैं जो हमारे लिए ब्याज के क्षेत्रों के साथ एक csv दस्तावेज़ बनाती है।

#!/usr/bin/env python3 from requests import get from sys import argv def print_to_csv(out_file,massive): open(out_file,'a').writelines('id;name;full_name;language;description;created_at;updated_at;html_url;homepage;fork' ';pushed_at;stargazers_count;has_wiki;has_pages;archived;license;score;stargazers_count\n') for i in massive: open(out_file,'a').writelines(i+'\n') def string_to_csv_string(my_dict): csv_string='' keys=['id', 'name', 'full_name','language', 'description','created_at', 'updated_at', 'html_url', 'homepage','fork', 'pushed_at', 'stargazers_count','has_wiki', 'has_pages', 'archived', 'license', 'score','stargazers_count'] for i in keys: csv_string+=(str(my_dict[i])+';') return csv_string def dicts_to_dictsString(dicts): strings=set() for dict in dicts: string=string_to_csv_string(dict) strings.add(string) return strings def search_to_git(keyword): item_all=set() req=get('https://api.github.com/search/repositories?q={}&per_page=100&sort=stars'.format(keyword)) item_all=item_all|dicts_to_dictsString(req.json()['items']) page_all=req.json()['total_count']/100 if page_all>=10: page_all=10 for i in range(2,int(page_all)+1): req = get('https://api.github.com/search/repositories?q={}&per_page=100&sort=stars&page={}'.format(keyword,i)) try: item_all=item_all|dicts_to_dictsString(req.json()['items']) except KeyError: return item_all return item_all if __name__ == '__main__': try: strings=list(search_to_git(argv[1])) print_to_csv(argv[1]+'.csv',strings) except IndexError: print('''exemple: ./git_search_info keyword_for_search out_file ''') 

स्क्रिप्ट चलाएँ

 python3 git_repo_search.py osint 

हमें मिलता है



मुझे लगता है कि अनावश्यक स्तंभों को छिपाने के बाद, जानकारी के साथ काम करना अधिक सुविधाजनक है।

यहाँ कोड

मुझे उम्मीद है कि कोई काम आएगा।