अपडेट (2 जुलाई, 2018): Google क्लाउड प्लेटफ़ॉर्म (GCP) सहायक कर्मचारियों ने आश्वासन दिया कि ऐसा दोबारा नहीं होगा। उनके शब्द: "बहुत से लोग (जीसीपी के भीतर) स्थिति को सुधारने में रुचि रखते हैं, न केवल आपके लिए, बल्कि सभी ग्राहकों के लिए।"

नोट: यह पोस्ट Google क्लाउड सेवाओं की गुणवत्ता के बारे में नहीं है। वे AWS के साथ ही बेहतरीन हैं। हम "बिना किसी चेतावनी के अचानक आंदोलनों" के बारे में बात कर रहे हैं, जब वे पूरी तरह से आपके सभी सिस्टम को बंद कर देते हैं, अगर कर्मचारी (या कार) अचानक फैसला करते हैं: कुछ गलत है। यह हमारे साथ दूसरी बार हुआ।

प्रागितिहास

हमारी उत्पादन परियोजना जीसीपी का उपयोग आठ पवन ऊर्जा संयंत्रों (पवन टरबाइन) और आठ देशों में बिखरे हुए दर्जनों सौर ऊर्जा संयंत्रों की निगरानी के लिए करती है। हमारे पास पूरी दीवार पर स्क्रीन के साथ नियंत्रण केंद्र हैं: मेट्रिक्स से भरे डैशबोर्ड हैं जो घड़ी के चारों ओर निगरानी करते हैं। ऑब्जेक्ट मैनेजर वास्तविक समय में व्यक्तिगत विंड टर्बाइन और सौर प्रतिष्ठानों की स्थिति की निगरानी के लिए इस प्रणाली का उपयोग करते हैं। यदि हस्तक्षेप की आवश्यकता होती है, तो यह तुरंत किया जाता है। डेवलपमेंट और फोरकास्टिंग टीमें BigQuery में डेटा एल्गोरिदम का परीक्षण करने के लिए सिस्टम का उपयोग करती हैं। सभी कार्यों को सीधे हमारे मुनाफे में अनुवादित किया जाता है। हम पवन / सौर ऊर्जा के साथ काम कर रहे हैं - एक खराब होने वाली वस्तु। यदि हम एक अधिशेष उत्पन्न करते हैं, तो हम इसे सहेज नहीं सकते हैं और इसे बाद में बेच सकते हैं। यदि हम अपर्याप्त रूप से उत्पन्न करते हैं, तो हम जुर्माना देते हैं। इस कारण से, सुविधाओं को 24/7 निगरानी करने की आवश्यकता है ताकि ऊर्जा प्रणाली की जरूरतों और बिजली की खरीद पर संपन्न समझौतों से परे न जाएं।

क्या हुआ?

आज सुबह (28 जून, 2018), मुझे अपटाइम बॉट से एक चेतावनी मिली कि पूरी साइट ऑफ़लाइन हो गई है। Google के ईमेल की हड़बड़ाहट, जिसमें कहा गया कि कुछ "संभावित संदिग्ध गतिविधि" का पता चला था और मेरे सभी सिस्टम बंद कर दिए गए थे। हर जगह बंद है। मशीन ने चेतावनी के बिना अमेरिका को बंद कर दिया। साइट काम नहीं करती है, एप्लिकेशन इंजन और डेटाबेस उपलब्ध नहीं हैं, फायरबेस के कई संदेश कहते हैं कि मुझे कम कर दिया गया था और इसलिए सीमाएं पार हो गई थीं।

अकेला बादल

ग्राहक सहायता चैट बंद है। हमारे पास फोन नहीं है। एक फ़ॉर्म भरने के लिए एक ईमेल आया, एक क्रेडिट कार्ड की एक तस्वीर और कार्ड धारक की एक तस्वीर के साथ सरकार द्वारा जारी की गई आईडी अपलोड करें। ठीक है, चलो सीएफओ को जगाएं जो कार्ड का मालिक है।

हम तीन व्यावसायिक दिनों के भीतर परियोजना को हटा देंगे।

“यदि खाताधारक तीन व्यावसायिक दिनों के भीतर खाता पुष्टिकरण फ़ॉर्म भरकर उल्लंघन को ठीक नहीं करता है, तो हम आपकी परियोजना को हटा देंगे। यह प्रपत्र आपकी पहचान और भुगतान साधन के स्वामित्व की पुष्टि करता है। मांगे गए दस्तावेजों को जमा करने में विफलता के कारण खाता बंद हो सकता है। ”

यदि कार्डधारक छुट्टी पर है और तीन दिनों के लिए अनुपलब्ध है, तो मुझे क्या करना चाहिए? हम सब कुछ खो देंगे - काम के वर्षों - राजस्व में लाखों डॉलर।

मैं विवरण के साथ फॉर्म भरता हूं और सौभाग्य से, 20 मिनट के भीतर सभी सेवाएं जीवन में वापस आने लगीं। जब यह पहली बार हुआ, डाउनटाइम कई घंटों तक चला। सामान्य तौर पर, हमने लगभग एक घंटे तक सभी जानकारी तक पहुंच खो दी। असुविधा के लिए एक स्वचालित पत्र माफी के साथ आता है। दुर्भाग्य से, कार को "असुविधाओं" की संख्या के बारे में कोई पता नहीं है।

आप सब कुछ बंद नहीं कर सकते और फिर स्पष्टीकरण मांग सकते हैं।

मैं समझता हूं कि Google को संदिग्ध गतिविधि को ट्रैक करने और रोकने की आवश्यकता है। लेकिन यह महत्वपूर्ण है कि आप संदिग्ध गतिविधि का पता लगाने के बाद वास्तव में क्या करते हैं। यहां मानव की भागीदारी की आवश्यकता है - ऐसा कुछ जिसे किसी भी कोड या एआई प्रणाली द्वारा प्रतिस्थापित नहीं किया जाता है। आप सब कुछ बंद नहीं कर सकते और फिर स्पष्टीकरण मांग सकते हैं। आपको इसके विपरीत करने की आवश्यकता है।

यह पहला प्रोजेक्ट है जिसे हमने Google क्लाउड पर पूरी तरह से बनाया है। पिछले सभी ने AWS पर काम किया। हमारे अनुभव में, AWS बिलिंग मुद्दों से निपटने में बहुत अधिक मानवीय है। वे आपको संदिग्ध गतिविधि की चेतावनी देते हैं और आपको समझाने और उसका पता लगाने का समय देते हैं। वे आपको सीढ़ियों से नहीं मारेंगे।

मुझे उम्मीद है कि जीसीपी टीम सुनती है और फर्क करती है। तब तक, मैं जीसीपी पर कभी भी कोई प्रोजेक्ट पोस्ट नहीं करूंगा।