डीडीआईए पुस्तक (हॉग के साथ पुस्तक) - डेटाबेस समझने में स्तर ऊपर करते हैं

कुछ महीने पहले, पूर्वव्यापी में से एक में, हमने एक साथ पढ़ने की कोशिश करने का फैसला किया।

हमारा प्रारूप:

1. एक पुस्तक चुनें।
2. हम उस हिस्से को निर्धारित करते हैं जिसे एक सप्ताह में पढ़ने की आवश्यकता होती है। एक छोटी मात्रा चुनें।
3. शुक्रवार को, हम चर्चा करते हैं कि हम क्या पढ़ते हैं।
4. हम गैर-काम के घंटों के दौरान पढ़ते हैं, काम के घंटों के दौरान चर्चा करते हैं।
5. पुस्तक खत्म करने के बाद, हम संयुक्त रूप से निम्नलिखित का चयन करते हैं।

क्या देता है:

1. पढ़ने और पढ़ने के लिए प्रेरणा।
2. कौशल का विकास (भविष्य के लिए)।
3. एक टीम में मानसिकता और शब्दावली का संरेखण।
4. आत्मविश्वास की वृद्धि।
5. बात करने का एक और कारण।

हाल ही में हमारे द्वारा पढ़ी गई पुस्तकों में से एक है डिजाइनिंग डेटा-इंटेंसिव एप्लिकेशन । हाँ, एक ही किताब के साथ एक हॉग। और सभी को यह पुस्तक इतनी पसंद आई कि मैंने यहाँ इसकी समीक्षा करने का निर्णय लिया ताकि अधिक से अधिक लोग इसे पढ़ें।


मूल गुणवत्ता में नक्शा

प्रकाशक पीटर से रूसी में इस पुस्तक का अनुवाद है। लेकिन हम मूल में पढ़ते हैं, इसलिए मैं यह वादा नहीं करता कि शर्तों के अनुवाद मेल खाएंगे। इसके अलावा, हमने जानबूझकर शर्तों का हिस्सा अनुवाद नहीं किया।

पुस्तक का प्रारंभिक भाग डेटा प्रोसेसिंग सिस्टम की मूल बातें के लिए समर्पित है।

पहला अध्याय इंगित करता है कि ऐसी प्रणालियों के महत्वपूर्ण गुण विश्वसनीयता, मापनीयता और रखरखाव में आसानी हैं।

दूसरा अध्याय विभिन्न डेटा मॉडल का वर्णन करता है। सामान्य रिलेशनल और दस्तावेज़-उन्मुख डीबीएमएस, साथ ही कम प्रसिद्ध ग्राफ और कॉलम डेटाबेस वर्णित हैं।
पहले अध्याय तारीख तक हैं, पुस्तक का दायरा स्थापित करते हैं। नीचे कई स्थानों पर, लेखक पहले अध्यायों को संदर्भित करता है। निष्पक्षता में, हम कह सकते हैं कि पुस्तक क्रॉस-रेफरेंस से भरी है।

पहले अध्यायों में से जो आश्चर्य की बात है वह स्रोतों की संख्या है (प्रत्येक अध्याय के बाद एक ग्रंथ सूची है)। दर्जनों लेखों (ब्लॉग और वैज्ञानिक दोनों) के लिंक और पुस्तकों को सभी अध्यायों में स्पष्ट रूप से व्यवस्थित किया गया है। कुछ अध्यायों के लिए स्रोतों की संख्या सौ से अधिक है।

तीसरा अध्याय सबसे सरल कुंजी-मूल्य स्टोर के स्रोत कोड से शुरू होता है:

#!/bin/bash db_set () { echo "$1,$2" >> database } db_get () { grep "^$1," database | sed -e "s/^$1,//" | tail -n 1 } 

यह काम भी करेगा, लेखन में बहुत अच्छा है, लेकिन निश्चित रूप से, समस्याओं को पढ़े बिना नहीं।
और तुरंत, प्रदर्शन में सुधार के लिए विकल्प पेश किए जाते हैं। हैश इंडेक्स, एसएसटीबल, बी-ट्री और एलएसएम-ट्री का वर्णन करता है। यह सब उंगलियों पर समझाया गया है, लेकिन यह दिखाया गया है कि परिचित डेटाबेस में यह या उस संरचना का उपयोग कैसे किया जाता है।

अभ्यास पर ध्यान केंद्रित पुस्तक की एक और बानगी है। अधिकांश उदाहरण और व्यंजन इतने व्यावहारिक हैं कि मैं लगभग सब कुछ प्रासंगिक हो गया।
चौथा अध्याय एन्कोडिंग का वर्णन करता है: नियमित JSON और XML से प्रोटोबुफ़ और AVRO तक। हम हमेशा प्रारूप को सचेत रूप से नहीं चुनते हैं, यह आमतौर पर एक या किसी अन्य तकनीक द्वारा एक पूरे के रूप में लगाया जाता है। लेकिन यह समझने के लिए अच्छा है कि यह अंदर कैसे काम करता है, प्रारूप की ताकत और कमजोरियां क्या हैं।

लेखक ने विशेष रूप से क्रमांकन शब्द का उपयोग नहीं किया है, क्योंकि इस शब्द का डेटाबेस में एक और अर्थ है।

मेरी संक्षिप्त प्रस्तुति की तुलना में अध्यायों की सामग्री बहुत समृद्ध है। पहले भाग में ओएलटीपी और ओएलएपी के बीच अंतर का वर्णन किया गया है कि कॉलम डेटाबेस, आरईएसटी और संदेश दलालों में पूर्ण-पाठ खोज और खोज की व्यवस्था कैसे की जाती है।

पुस्तक का दूसरा भाग वितरित डेटा प्रोसेसिंग सिस्टम के बारे में बात करता है। लगभग सभी आधुनिक प्रणालियां जो कम या ज्यादा भरी हुई हैं उनमें कई प्रतिकृतियां या सबसिस्टम (माइक्रोसर्विस) हैं।

जब हमने पहली बार एक साथ पढ़ने का अभ्यास शुरू किया, तो हमने बस हमारे नोट्स, दिलचस्प स्थानों और विचारों पर चर्चा की। कुछ बिंदु पर, हमने महसूस किया कि हमने केवल पर्याप्त बातचीत नहीं की है, चर्चा के बाद सब कुछ जल्दी से भूल जाता है। फिर हमने अपने अभ्यास को मजबूत करने का फैसला किया और एक माइंड मैप फिल को जोड़ा। अभिनव के पास बस यह किताब थी। दूसरे भाग से शुरू करके, हमने प्रत्येक अध्याय के लिए एक माइंड मैप को बनाए रखना शुरू किया। इसलिए, आगे का प्रत्येक अध्याय हमारे दिमाग के नक्शे के साथ होगा। हमने coggle.it का उपयोग किया

पांचवें अध्याय में प्रतिकृति का वर्णन है।


यहां प्रतिकृतियों के बारे में सभी बुनियादी जानकारी एकत्र की गई है: एकल-मास्टर, मल्टीमास्टर, प्रतिकृति लॉग और लीडरलेस सिस्टम में प्रतिस्पर्धी रिकॉर्ड के साथ कैसे रहना है।

छठा अध्याय विभाजन का वर्णन करता है (उर्फ शेरिंग और अन्य शब्दों का एक गुच्छा)।

आप सीखेंगे कि डेटा को शार्क में कैसे तोड़ना है, किन समस्याओं को हल किया जा सकता है और किनको प्राप्त करना है, कैसे इंडेक्स और डेटा को संतुलित करना है।

सातवां अध्याय : लेन-देन।

घटनाएँ (तिरछा पढ़ें, तिरछा लिखना, प्रेत पढ़ना, आदि) वर्णित हैं और कैसे ACID शैली डेटाबेस के अलगाव स्तर समस्याओं से बचने में मदद करते हैं।

आठवां अध्याय: वितरित प्रणालियों के लिए विशिष्ट समस्याओं के बारे में।

लेखक एक महत्वपूर्ण विचार पर जोर देता है: यदि पहले सिस्टम एक मशीन पर काम करता था, और विफलता के मामले में पूरी प्रणाली ने काम करना बंद कर दिया (और किसी भी नए डेटा को स्वीकार करना)। इस प्रकार, विफलताओं के बाद डेटा एक सुसंगत स्थिति में बना रहा, लेकिन आज, प्रतिकृतियां और माइक्रोसेवा के युग में, सिस्टम का केवल एक हिस्सा बंद हो रहा है। इस प्रकार, हमें एक नई समस्या का सामना करना पड़ता है: आंशिक विफलता की स्थितियों में डेटा स्थिरता सुनिश्चित करना, एक अविश्वसनीय नेटवर्क के साथ लगातार समस्याएं, आदि।

नौवें अध्याय में सुसंगतता और सहमति का वर्णन है और एक महत्वपूर्ण अवधारणा का परिचय देता है: रैखिकता। मुझे याद है कि सिर मुश्किल से आया और मेरे सिर में फिट हुआ)

इस अध्याय में दो-चरण प्रतिबद्ध तकनीक और इसके कमजोर बिंदुओं का भी वर्णन किया गया है। साथ ही इस अध्याय में आप क्रमबद्धता की गारंटी के बारे में पढ़ेंगे। कैसे और क्या आधुनिक सिस्टम आपको प्रदान कर सकते हैं।

पुस्तक का तीसरा भाग व्युत्पन्न डेटा के लिए समर्पित है (कोई स्थापित अनुवाद नहीं है)। नतीजतन, लेखक इस विचार को आवाज देता है कि सभी अनुक्रमित, टेबल, भौतिक विचार केवल लॉग पर एक कैश हैं। केवल लॉग में सबसे अधिक प्रासंगिक डेटा होता है, बाकी सब कुछ देर से होता है और सुविधा के लिए उपयोग किया जाता है।

दसवाँ अध्याय।

यदि आपके पास Hadoop या MapReduce के साथ अनुभव है, तो शायद आप थोड़ा नया सीखेंगे। लेकिन मैंने काम नहीं किया और यह बहुत दिलचस्प था। मेरे लिए एक महत्वपूर्ण बिंदु - अपने आप में बैच प्रोसेसिंग का परिणाम दूसरे डेटाबेस के लिए आधार बन सकता है।

अध्याय 11. डेटा प्रोसेसिंग को स्ट्रीम करना।

संदेश दलालों का वर्णन किया जाता है और लॉग-आधारित से एएमपीक्यू-शैली कैसे भिन्न होती है। वास्तव में, अध्याय में बहुत सारी अन्य जानकारी है। यह पढ़ना बहुत दिलचस्प था।

आखिरी अध्याय भविष्य के बारे में है। क्या उम्मीद की जाए, शोधकर्ताओं और इंजीनियरों के विचार पहले से ही व्यस्त हैं।


इससे मेरी समीक्षा समाप्त होती है। यह समझना महत्वपूर्ण है कि मैंने प्रत्येक अध्याय के लिए शोध का केवल एक हिस्सा बनाया। पुस्तक में इतनी सघन सामग्री है कि यह संक्षेप में संभव नहीं है, लेकिन पूरी तरह से रिटेल है।

व्यक्तिगत रूप से, मुझे लगता है कि यह पुस्तक पिछले कुछ वर्षों में सर्वश्रेष्ठ तकनीकी है। मैं इसे पढ़ने की अत्यधिक सलाह देता हूं। और न सिर्फ पढ़ें, बल्कि कड़ी मेहनत करें। ग्रंथ सूची के लिंक का पालन करें, वास्तविक DBMS के साथ खेलें।

इस पुस्तक को पढ़ने के बाद, आप आसानी से एक तकनीकी डेटाबेस साक्षात्कार में कई सवालों के जवाब दे सकते हैं। लेकिन यह बात नहीं है। आप एक डेवलपर के रूप में कूलर बन जाएंगे, आप आंतरिक संरचना, विभिन्न डेटाबेस की ताकत और कमजोरियों को जानेंगे और वितरित प्रणालियों की समस्याओं के बारे में सोचेंगे।

मैं स्वयं पुस्तक और हमारी पढ़ने की प्रथा दोनों टिप्पणियों में चर्चा के लिए तैयार हूं।

किताबें पढ़ें!