ListenNotes.com पर खोज परिणाम

सुनो नोट्स एक खोज इंजन और पॉडकास्ट डेटाबेस है। तकनीक वास्तव में बहुत उबाऊ है। कोई ऐ, गहरी शिक्षा या ब्लॉकचेन नहीं। "यदि आपको एआई के कार्यान्वयन की घोषणा करनी चाहिए, तो आप रियल एआई का उपयोग नहीं कर रहे हैं" :)

इस लेख को पढ़ने के बाद, आप मेरे प्रोजेक्ट को दोहरा सकते हैं या आसानी से कुछ ऐसा ही कर सकते हैं। आपको बहुत सारे डेवलपर नहीं रखने होंगे। याद रखें, जब इंस्टाग्राम ने $ 57.5 मिलियन जुटाए और $ 1 बिलियन के लिए फेसबुक पर गए , तो उनके पास केवल 13 कर्मचारी थे - और ये केवल डेवलपर नहीं हैं। इंस्टाग्राम की खरीद 2012 की शुरुआत में हुई। अब वर्ष 2019 है, और आज पहले से कहीं ज्यादा यह आसान है कि एक छोटे से इंजीनियरिंग टीम के साथ कुछ सार्थक बनाया जाए - यहां तक ​​कि एक व्यक्ति से भी।

यदि आपने सुने नोट नहीं देखे हैं, तो इसे अभी आज़माएँ:

सिंहावलोकन

आइए परियोजना की आवश्यकताओं या विशेषताओं के साथ शुरू करें।

सुनो नोट्स दो कार्य प्रदान करता है:

• पॉडकास्ट श्रोताओं के लिए वेबसाइट। यहां एक खोज इंजन है, पॉडकास्ट का एक डेटाबेस, बाद में सुनने के लिए प्लेलिस्ट, पॉडकास्ट से कटे हुए क्लिप को बचाया, और इंटरनेट पर कुछ नए पॉडकास्ट में निर्दिष्ट कीवर्ड का उल्लेख किए जाने पर सूचनाएं ।
  
• डेवलपर्स के लिए पॉडकास्ट और एपीआई खोजें । हमें एपीआई के उपयोग को ट्रैक करने, ग्राहकों से धन प्राप्त करने, ग्राहक सहायता प्रदान करने और बहुत कुछ करने की आवश्यकता है।

सब कुछ AWS पर काम करता है, उत्पादन में केवल 20 सर्वर (5 मई, 2019 तक):


सुन नोट्स चलाने वाले सेवक

होस्ट नाम से, आप आसानी से अनुमान लगा सकते हैं कि प्रत्येक सर्वर क्या करता है।

• उत्पादन-वेब ListenNotes.com के लिए वेब ट्रैफ़िक प्रदान करता है।
  
• उत्पादन-एपीआई यातायात एपीआई का कार्य करता है। हम एपीआई के दो संस्करणों (4 मई, 2019 तक) का समर्थन करते हैं: v1api (पदावनत) और v2api (नया)
  
• प्रोडक्शन-डीबी ने लॉन्च किया PostgreSQL (मास्टर और गुलाम)
  
• उत्पादन-एस ने एलिटिक्सखोज क्लस्टर लॉन्च किया।
  
• प्रोडक्शन-वर्कर पॉडकास्ट डेटाबेस को हमेशा अद्यतित रखने के लिए स्टैंड-अलोन प्रोसेसिंग कार्य चलाता है और कुछ मैजिक फीचर्स प्रदान करता है (जैसे खोज परिणामों की रैंकिंग, एपिसोड / पॉडकास्ट आदि के लिए सिफारिशें)।
  
• production-lb एक लोड बैलेंसर है। सुविधा के लिए, मैं इस सर्वर पर Redis और RabbitMQ भी चलाता हूं। मुझे पता है कि यह सही नहीं है। लेकिन मैं संपूर्ण व्यक्ति नहीं हूं। :)
  
• उत्पादन-पंगु एक उत्पादन सर्वर है जिस पर मैं कभी-कभी एक बार स्क्रिप्ट चलाता हूं और परिवर्तनों का परीक्षण करता हूं। पंगु क्या है?

अधिकांश सर्वरों को क्षैतिज रूप से बढ़ाया जा सकता है। इसलिए मैं उन्हें उत्पादन-कुछ कहती हूं, उत्पादन-कुछ -2 , आदि ... उत्पादन-कुछ जोड़ने के लिए बहुत आसान है और कुछ-कुछ उत्पादन-क्लस्टर में 4 ।

बैकएंड

पूरा बैकेंड Django / Python3 में लिखा गया है। ऑपरेटिंग सिस्टम उबंटू है।

UWSGI का उपयोग वेब ट्रैफिक की सेवा के लिए किया जाता है। मैंने uWSGI प्रक्रियाओं से पहले nginx स्थापित किया, यह एक लोड बैलेंसर के रूप में भी काम करता है।

मुख्य डेटा वेयरहाउस PostgreSQL है , जिसके साथ मुझे कई वर्षों से विकास और संचालन में व्यापक अनुभव है। सिद्ध तकनीक के साथ, आप रात में शांति से सोते हैं। रेडिस का उपयोग विभिन्न उद्देश्यों (जैसे कैशिंग, सांख्यिकी ...) के लिए किया जाता है। यह अनुमान लगाना आसान है कि एलीस्टेकर्च का उपयोग कहीं न कहीं किया जाता है । हां, मैं इसका उपयोग पॉडकास्ट को अनुक्रमित करने और अधिकांश उबाऊ कंपनियों की तरह खोज क्वेरी की सेवा के लिए करता हूं।

अजवाइन का उपयोग ऑफ़लाइन प्रसंस्करण के लिए किया जाता है, जबकि सेलेरी बीट शेड्यूलिंग कार्यों के लिए अभिप्रेत है जो क्रोन नौकरियों के समान हैं, लेकिन थोड़ा अच्छा है। अगर भविष्य में सुनो नोट्स लोकप्रिय हो जाते हैं, और सेलेरी और बीट स्केलिंग के साथ समस्याएं पैदा करते हैं, तो मैं शायद दो परियोजनाओं पर स्विच करूंगा जो मैंने पिछले नियोक्ता के लिए किया था: ndkale और ndscheduler ।

सुपरवाइजर प्रत्येक सर्वर पर प्रक्रियाओं का प्रबंधन करता है।

रुको, डोकर, कुबेरनेट और सर्वर रहित वास्तुकला के बारे में क्या? कुछ भी नहीं। अनुभव के साथ, आप बहुत अधिक नहीं करना सीखते हैं। वास्तव में, मैंने 2014 में डॉकर के साथ पिछली नौकरी में थोड़ा काम किया था: एक औसत स्टार्टअप के लिए अच्छा था जो एक बिलियन डॉलर की कीमत वाली एक छोटी कंपनी के लिए अनावश्यक लगता है।

दृश्यपटल

वेब इंटरफ़ेस मुख्य रूप से React + Redux + Webpack + ES का उपयोग करके बनाया गया है। इन दिनों बहुत मानक है। जब एक उत्पादन वातावरण में तैनात किया जाता है, तो JS संकुल को अमेज़न S3 में डाउनलोड किया जाता है और CloudFront के माध्यम से जारी किया जाता है।

ListenNotes.com पर, अधिकांश वेब पेज सर्वर साइड ( Django टेम्प्लेट ) पर आधे और क्लाइंट साइड ( रिएक्ट ) पर दिए गए हैं। वेब पेज टेम्प्लेट सर्वर से आता है, और क्लाइंट पक्ष पर, इंटरैक्टिव वेब एप्लिकेशन मुख्य रूप से प्रदान किया जाता है। लेकिन कई वेब पेज सर्वर पर मेरे आलस्य और कुछ संभावित एसईओ लाभों के कारण पूरी तरह से तैयार हैं।

ऑडियो प्लेयर

मैं प्रतिक्रिया-मीडिया-खिलाड़ी के एक अत्यधिक संशोधित संस्करण का उपयोग कर रहा हूं। यह वेबसाइट पर एक अंतर्निहित खिलाड़ी के रूप में वेबसाइट पर काम करता है और तीसरे पक्ष के साइटों पर एक अंतर्निहित खिलाड़ी:


तीसरे पक्ष के साइटों पर निर्मित खिलाड़ी

एपीआई

हम एक सरल और मजबूत पॉडकास्ट एपीआई के साथ डेवलपर्स प्रदान करते हैं। एपीआई का निर्माण वेबसाइट बनाने के समान है। यहाँ इंटरफेस के लिए बैकएंड और रिएक्टजेएस के लिए एक ही Django / पायथन स्टैक है (उदाहरण के लिए एपीआई टूलबार, प्रलेखन ...)।


एपीआई टूलबार सुनें


सुनो एपीआई प्रलेखन

एपीआई के लिए, हमें इस बात पर नज़र रखने की ज़रूरत है कि ग्राहक मौजूदा बिलिंग चक्र में कितने अनुरोधों का उपयोग करता है और शुल्क लेता है। यह कल्पना करना आसान है कि रेडिस सक्रिय रूप से यहां उपयोग किया जाता है :)

DevOps

मशीन की तैयारी और कोड परिनियोजन

Ansible का उपयोग प्रावधान करने के लिए किया जाता है। अनिवार्य रूप से, मैंने यह इंगित करने के लिए कि कौन-सी कॉन्फ़िगरेशन फ़ाइल और किस प्रकार के सर्वर पर सॉफ़्टवेयर होना चाहिए, यम फ़ाइलों का एक गुच्छा लिखा। मैं एक सर्वर को सभी सही कॉन्फ़िगरेशन फ़ाइलों और सभी स्थापित सॉफ़्टवेयर के साथ एक बटन पर क्लिक करके तैनात कर सकता हूं। यहाँ इन Ansible yaml फ़ाइलों के लिए निर्देशिका संरचना है:


मैं बेहतर निर्देशिका का नाम सकता है। लेकिन फिर, अब बहुत हो गया

Ansible उत्पादन में कोड को तैनात करने में भी मदद करता है। मूल रूप से, मेरे पास एक तैनाती। S आवरण स्क्रिप्ट है जो macOS पर काम करती है:

  ./deploy.sh उत्पादन HEAD वेब 

इस स्क्रिप्ट में तीन तर्क दिए गए हैं:

• पर्यावरण : उत्पादन या मंचन।
  
• श्रोता के संस्करण का भंडार : HEAD का अर्थ है "बस नवीनतम संस्करण को तैनात करें।" यदि एक SHA प्रतिबद्ध निर्दिष्ट किया जाता है, तो यह कोड के एक निश्चित संस्करण को तैनात करेगा - यह विशेष रूप से उपयोगी है जब मुझे खराब तैनाती के बाद वापस रोल करने की आवश्यकता होती है।
  
• सर्वर के प्रकार : वेब, कार्यकर्ता, एपीआई या सभी। मुझे एक ही बार में सभी सर्वरों पर तैनात करने की आवश्यकता नहीं है। कभी-कभी मैं जावास्क्रिप्ट कोड में बदलाव करता हूं, फिर मुझे इसे केवल एपीआई या श्रमिकों को छूने के बिना वेब पर तैनात करने की आवश्यकता है।

तैनाती की प्रक्रिया मुख्य रूप से Ansible yaml फ़ाइलों द्वारा आयोजित की जाती है, और निश्चित रूप से, अत्यंत सरल है:

• मेरे मैकबुक प्रो पर , यदि यह वेब सर्वर के लिए एक तैनाती है, तो जावास्क्रिप्ट पैकेज बनाए जाते हैं और S3 में लोड किए जाते हैं।
  
• टारगेट सर्वर पर, git क्लोनॉज़ रिपॉजिटरी को टाइमस्टैम्प नामक एक फोल्डर में क्लोन करता है, एक विशिष्ट संस्करण के लिए जाँच करता है, और यदि कोई हो, तो नया पायथन निर्भरता स्थापित करता है।
  
• लक्ष्य सर्वरों पर, एक प्रतीकात्मक लिंक टाइमस्टैम्प नामक पूर्वोक्त फ़ोल्डर को इंगित करता है, फिर हम पर्यवेक्षक के उपयोग से सर्वर को पुनः आरंभ करते हैं।

जैसा कि आप देख सकते हैं, मैं इन फैंसी CI टूल का उपयोग नहीं करता हूं। केवल सबसे सरल और सबसे विश्वसनीय उपकरण जो वास्तव में काम करते हैं।

निगरानी और चेतावनी

निगरानी और अलर्ट डेटाडॉग द्वारा किया जाता है । एक साधारण डैशबोर्ड कुछ उच्च-स्तरीय मीट्रिक दिखाता है। यहाँ सब कुछ उत्पादन में सर्वर के साथ उपद्रव होने पर मेरा आत्मविश्वास बढ़ाने के लिए बनाया गया है।


दिसंबर 2017 तक सुनो नोट्स के लिए डेटाडॉग डैशबोर्ड

दातादोग पेजरडूट से जुड़ा हुआ है। अगर कुछ गलत होता है, तो PagerDuty मुझे फोन और एसएमएस द्वारा एक अधिसूचना भेजेगा।

मैं Django कोड की स्थिति को ट्रैक करने और अप्रत्याशित अपवादों को पकड़ने के लिए रोलबार का उपयोग करता हूं , मुझे ईमेल और स्लैक द्वारा सूचित किया गया है।

सुस्त बहुत सक्रिय है। हां, यह एक व्यक्ति के साथ एक कंपनी है, इसलिए इसे संचार के लिए नहीं, बल्कि आवेदन स्तर पर दिलचस्प घटनाओं की निगरानी के लिए आवश्यक है। डेटाैक और रोलबार को स्लैक के साथ एकीकृत करने के अलावा, स्लैक बैकएंड वेब कोड उपयोगकर्ता पंजीकरण या कुछ दिलचस्प कार्यों (उदाहरण के लिए, तत्वों को हटाने या हटाने) के लिए आपको सूचित करने के लिए स्लैक इनकमिंग वेब हुक को भी एकीकृत करता है। यह प्रौद्योगिकी कंपनियों में एक बहुत ही आम बात है। यदि आप अमेज़ॅन या पेपाल के शुरुआती वर्षों के बारे में किताबें पढ़ते हैं, तो आपको पता चलेगा कि दोनों कंपनियों के पास एक समान अधिसूचना तंत्र था: जब भी कोई उपयोगकर्ता पंजीकृत होता है, तो कार्यालय में सभी को सूचित करने के लिए "डिंग" ध्वनि होती थी।

2017 की शुरुआत में लॉन्च के बाद से, सुनो नोट्स को इसके अलावा कोई गंभीर डाउनटाइम (5 मिनट से अधिक) नहीं हुआ है । मैं काम कर रहे DevOps में हमेशा बहुत सावधान और व्यावहारिक हूं। सर्वर के लिए, प्रेस या कुछ और में जाने के कारण उपस्थिति में कुछ भारी उछाल के मामले में एक गंभीर ओवरहेड प्रदान किया जाता है।

डिज़ाइन

मैं सैन फ्रांसिस्को में WeWork के लिए काम करता हूं। कुछ पूछ सकते हैं, क्यों न केवल घर से या कुछ आकस्मिक कैफे से काम करें। खैर, मैं वास्तव में उत्पादकता को महत्व देता हूं और इसमें पैसा लगाने के लिए तैयार हूं। मुझे विश्वास नहीं है कि एक होम मेस सॉफ्टवेयर के विकास में योगदान देता है (या ज्ञान / रचनात्मकता के क्षेत्र में कोई काम करता है)। मैं शायद ही कभी दिन में 8 घंटे से अधिक काम करता हूं (क्षमा करें 996 लोग )। मुझे हर मिनट की गिनती चाहिए। इस प्रकार, एक अच्छा और अपेक्षाकृत महंगा निजी कार्यालय वह है जो मुझे चाहिए। समय की गिरावट के लिए पैसे बचाने के बजाय, मैं इसे लाभप्रद रूप से उपयोग करने और पैसा बनाने के लिए समय का अनुकूलन करता हूं।


WeWork पर मेरा कार्यालय

मैं एक मैकबुक प्रो पर काम करता हूं। वैग्रांट + वर्चुअलबॉक्स के अंदर एक लगभग समान बुनियादी ढांचा चलता है। विकास के माहौल के लिए, वैगरेंट ऊपर वर्णित Ansible yaml फ़ाइलों के एक ही सेट का उपयोग करता है।

मैं एक अखंड भंडार के दर्शन का समर्थन करता हूं। इस प्रकार, DevOps स्क्रिप्ट, फ़्रंटएंड और बैकएंड कोड के साथ एक और केवल एक ही रिपॉजिटरी है। इसे GitHub पर एक निजी भंडार के रूप में होस्ट किया गया है। सभी विकास मुख्य शाखा में है। मैं शायद ही कभी ब्रंच का उपयोग करता हूं।

मैं कोड लिखता हूं और PyCharm का उपयोग करते हुए देव सर्वर (Django धावक और वेबपैक देव सर्वर) चलाता हूं । हां, मुझे पता है, यह उबाऊ है। आखिरकार, यह विजुअल स्टूडियो कोड या एटम या किसी प्रकार का कूल आईडीई नहीं है। लेकिन मेरे लिए, Pyharm बस ठीक काम करता है। पुराने स्कूल, आप क्या कर सकते हैं।


मेरा पाइक्रोम

अनेक वस्तुओं का संग्रह

उपयोगी उपकरण और सेवाओं के टन हैं जो मैं एक उत्पाद और कंपनी के रूप में सुनो नोट्स बनाने के लिए उपयोग करता हूं:

• iTerm2 और टर्मिनलों के रूप में tmux ।
• TODO सूचियों, विकियों, नोटों, डिजाइन नोटों के लिए धारणा ...
• जी सूट @ listennotes.com मेल, कैलेंडर और अन्य Google सेवाओं के लिए।
• मासिक मेलिंग के लिए MailChimp ।
• व्यापार और कुछ मार्केटिंग न्यूज़लेटर्स के लिए अमेज़न एसईएस ।
• अपने आप को और कुछ ठेकेदारों को भुगतान करने के लिए गुस्टो अगर वे Upwork के साथ नहीं हैं।
• ठेकेदारों को खोजने के लिए काम
• विज्ञापनों और ट्रैकिंग प्रदर्शन के प्रबंधन के लिए Google विज्ञापन प्रबंधक ।
• बैकअप विज्ञापनों के लिए कार्बन विज्ञापन और BuySellAds ।
• DNS, CDN और फ़ायरवॉल के प्रबंधन के लिए Cloudflare ।
• पॉडकास्ट साक्षात्कार अनुभाग में वर्कफ़्लोज़ को सुव्यवस्थित करने के लिए जैपियर और ट्रेलो ।
• कंपनी ब्लॉग के लिए मध्यम ।
• डोमेन नाम के लिए Godaddy और Namecheap ।
• उपयोगकर्ताओं से धन प्राप्त करने के लिए स्ट्राइप (मुख्य रूप से एपीआई के लिए )।
• पॉडकास्ट को डिकोड करने के लिए Google स्पीच-टू-टेक्स्ट एपीआई ।
• स्वास्थ्य बीमा के लिए कैसर परमानेंट ।
• कानूनी पंजीकरण के लिए धारी एटलस नोट, इंक।
• क्लर्की : उद्यम निवेशकों (SAFE) के लिए कानूनी दस्तावेज तैयार करना और ठेकेदारों को काम पर रखना अगर वे Upwork के साथ नहीं हैं।
• बहीखाते के लिए क्विकबुक ।
• सेवाओं के ढेर में पासवर्ड का प्रबंधन करने के लिए 1password
• एक भुगतान कार्ड के रूप में Brex - आप अतिरिक्त $ 5,000 AWS क्रेडिट का उपयोग करके उन्हें WWS या स्ट्राइक एटलस से AWS क्रेडिट के शीर्ष पर कर सकते हैं।
• बॉनवॉय बिजनेस एमेक्स कार्ड - आप लक्जरी होटल और उड़ानों पर मैरियट बॉनवॉय अंक जमा कर सकते हैं। यह सबसे अच्छा यात्रा बोनस कार्यक्रम है /
• अपने मौजूदा बैंक खाते के लिए कैपिटल वन स्पार्क ।

शांत रहें और झटका न दें ...

जैसा कि आप देख सकते हैं, हम अपने व्यवसाय को लॉन्च करने के लिए एक महान समय में रहते हैं। बहुत सारे ऑफ-द-शेल्फ उपकरण और सेवाएँ हैं जो आपकी उत्पादकता को बढ़ाते हुए, समय और पैसा बचाते हैं। अब इतिहास में सबसे अच्छा समय है एक छोटी सी टीम (या केवल एक व्यक्ति के प्रयासों के साथ) सरल और उबाऊ प्रौद्योगिकियों का उपयोग करके मानवता के लिए कुछ उपयोगी बनाने के लिए।

समय के साथ, कंपनियां छोटी और छोटी हो जाती हैं। अब पूर्णकालिक कर्मचारियों के टन किराया करने की आवश्यकता नहीं है। सभी काम करने के लिए, आप ऑर्डर करने के लिए सास सेवाओं और ठेकेदारों का उपयोग कर सकते हैं।

मूल रूप से, एक परियोजना बनाने में मुख्य बाधा अत्यधिक सोच है। अगर ऐसा है तो क्या, अगर ऐसा है तो। लड़का, किसी को तुम्हारी जरूरत नहीं है हर कोई अपने-अपने मामलों में व्यस्त है। किसी को भी आपकी और आपकी परियोजना में कोई दिलचस्पी नहीं है जब तक कि आप यह साबित नहीं करते कि आप ध्यान के योग्य हैं। यहां तक ​​कि अगर आप लॉन्च को लॉक करते हैं, तो कोई भी नोटिस नहीं करेगा। बड़ा सोचो, छोटा शुरू करो, तेजी से काम करो। यदि आप वास्तव में समस्या का समाधान करते हैं तो बोरिंग तकनीक का उपयोग करना और कुछ सरल (यहां तक ​​कि बदसूरत) के साथ शुरू करना बिल्कुल सामान्य है।


अब कार्गो पंथ वाले बहुत सारे लोग हैं। शोर को नजरअंदाज करें। शांत रहें और झटका न दें।