SDMX (सांख्यिकीय डेटा और मेटाडेटा eXchange)

रूसी भाषा के इंटरनेट पर एसडीएमएक्स के बारे में बहुत कम जानकारी है, इस तथ्य के बावजूद कि कई देशों और अंतरराष्ट्रीय संगठनों द्वारा डेटा के प्रकाशन और विनिमय के लिए इस मानक का लंबे समय से उपयोग किया जाता है। मानक विकास पहल का शुभारंभ सात अंतरराष्ट्रीय संगठनों द्वारा किया गया था, जिन्होंने विकास को प्रायोजित किया। इस तरह के संगठनों के बीच सांख्यिकीय डेटा के आदान-प्रदान को सरल बनाना, इस तरह के विनिमय के लिए एक मानक बनाना और इस मानक को लागू करने के लिए व्यावसायिक प्रक्रिया का वर्णन करना था। एक एकल दृष्टिकोण न केवल आपको सांख्यिकीय डेटा तक पहुंच को आसान बनाने की अनुमति देता है, बल्कि मेटाडेटा (डेटा के बारे में डेटा) के उपयोग के माध्यम से उनके अर्थ और सामग्री की समझ को और अधिक सुलभ बनाता है।

एसडीएमएक्स पहल की मुख्य साइट sdmx.org है , जिसमें अनुमोदित क्रॉस-डोमेन अवधारणाओं, संदर्भ पुस्तकों और क्लासिफायरियर की सूची भी शामिल है। मानक में शामिल होने वाला प्रत्येक संगठन एक विशेष प्रशासनिक पंजीकरण प्रक्रिया का उपयोग करके इसका विस्तार और पूरक कर सकता है।

मानक कार्रवाई के लिए एक सख्त मार्गदर्शक नहीं है; संगठन स्वयं चुनते हैं कि वे किन एसडीएमएक्स तत्वों का उपयोग करेंगे और किन उद्देश्यों के लिए।

SDMX मानक विवरण में निम्नलिखित घटक होते हैं:

• सूचना मॉडल
• संरचना, सामग्री मॉडल और डेटा प्रकारों का वर्णन करने के लिए XSD स्कीमा
• सामग्री-उन्मुख दिशानिर्देश
• एसडीएमएक्स के साथ काम करने के लिए कार्यक्रमों और उपकरणों का एक सेट

SDMX सूचना मॉडल मानक की नींव है। यह अवधारणाओं ( CONCEPT ), प्रतिबंधों ( CONSTRAIN ), नियमों, संचालन द्वारा दर्शाया जाता है, संगठन द्वारा बताए गए सांख्यिकीय आंकड़ों के प्रारूप और संरचना को निर्धारित करने के लिए। इस लेख के ढांचे में, सभी एसडीएमएक्स संस्थाओं, केवल मुख्य घटकों का पूरी तरह से वर्णन करने की योजना नहीं है।

SDMX सूचना मॉडल

आंकड़े नियमित डेटा से कैसे भिन्न हैं? हां, सामान्य तौर पर, कुछ भी नहीं।

सांख्यिकीय डेटा - एक सामूहिक घटना या प्रक्रिया के बारे में क्रमबद्ध, वर्गीकृत डेटा का एक सेट। उन्हें माप के एक सेट (अवधारणाओं, एसडीएमएक्स के संदर्भ में) की विशेषता है, जिनमें से एक आमतौर पर एक समय अवधि है। बीआई उपकरण आमतौर पर ऐसे डेटा को संसाधित और विश्लेषण करने के लिए उपयोग किया जाता है।

सांख्यिकीय अवलोकन अवधारणाओं के विशिष्ट मूल्यों का एक सेट है जो डेटा सरणी की समग्रता की प्रत्येक इकाई को विशिष्ट रूप से चिह्नित करता है।

संख्या "208.36" एक सांख्यिकीय अवलोकन है जिसे अवधारणाओं के एक समूह द्वारा परिभाषित किया गया है (सभी डेटा काल्पनिक है)

एसडीएमएक्स में, अवधारणा संरचना का मूल उद्देश्य है और सांख्यिकीय टिप्पणियों के गुणात्मक विशेषता का प्रतिनिधित्व करता है। एक अवधारणा के लिए मान एक संख्या, एक स्ट्रिंग, एक तिथि या कोड निर्देशिकाओं ( CODELIST ) से मान हो सकते हैं। यह प्रतिनिधित्व डेटा संरचना परिभाषा में परिभाषित किया जा सकता है जब अवधारणा को आयाम या विशेषता के रूप में उपयोग किया जाता है।

कोड संदर्भ एक साधारण कुंजी-मूल्य सूची है। सूची उन कई मानों को सूचीबद्ध करती है जिनका उपयोग दृश्य में किया जाएगा: संकेतक, विशेषताएँ और एसडीएमएक्स संरचनात्मक भाग के अन्य तत्व। वे अन्य संरचनात्मक मेटाडेटा द्वारा पूरक हैं, जो विभिन्न भाषाओं और कोड के पदानुक्रमित संगठन के लिए विशिष्ट विवरण को प्रतिबिंबित कर सकते हैं।

SDMX संरचनात्मक वस्तुओं को कोड करने के सिद्धांत को मानक में परिभाषित किया गया है: अपरकेस में लैटिन अक्षर, संख्या और अंडरस्कोर की अनुमति है। इसके अलावा, संस्करणित संरचनाओं का समर्थन किया जाता है।

डेटा संरचना का विवरण डेटा संरचना परिभाषा ( DSD ) अंतिम डेटा सेट ( DATASET ) के गठन के लिए उचित संरचना और अवधारणाओं का क्रम निर्धारित करता है। संरचना में शामिल प्रत्येक अवधारणा को डेटा सेट में इसकी भूमिका की परिभाषा दी गई है:

• आयाम ( आयाम ) - मुख्य डेटा पहचानकर्ता। अस्थायी एक को छोड़कर सभी आयामों के मूल्यों का समूह, एक डेटा संरचना के ढांचे के भीतर श्रृंखला का एक अद्वितीय कोड ( CODE ) बनाता है।
• विशेषता ( ATTRIBUTE ) - डेटा सेट के लिए या विशिष्ट अवलोकन के लिए एक अतिरिक्त विवरण प्रदान करता है। एक विशेषता का एक उदाहरण माप की एक इकाई या एक अवलोकन स्थिति (प्रारंभिक, पूर्वानुमानित, संशोधित, आदि) हो सकती है।
• तत्काल मूल्य ( MEASURE ) अवलोकन है।

इस प्रकार, ऊपर दिए गए उदाहरण को निम्नलिखित डेटा संरचना द्वारा वर्णित किया जा सकता है:

संकल्पना	भूमिका	डेटा प्रकार
दौरा	माप	संदर्भ पुस्तक
देश	माप	संदर्भ पुस्तक
क्रियात्मक श्रेणी	माप	संदर्भ पुस्तक
अवधि	समय का मापन	तिथि
माप की इकाई	गुण	संदर्भ पुस्तक
मूल्य	मूल्य	संख्या

डेटासेट ( DATASET ) सजातीय डेटा का एक संग्रह है जिसमें एक सामान्य DSD संरचना होती है। इसमें एक निश्चित बिंदु पर समय श्रृंखला या कई श्रृंखला हो सकती है ( क्रॉस-अनुभागीय डेटा )।

संचार अवधारणाओं, CODELISTS, DSD और DATASET

यूरोपीय सेंट्रल बैंक की वेबसाइट से डेटासेट का एक उदाहरण। "कुंजी" फ़ील्ड में प्रत्येक समय श्रृंखला के लिए माप का एक सेट होता है, जिसे एक बिंदु द्वारा अलग किया जाता है, वे एक अद्वितीय कुंजी बनाते हैं

समय श्रृंखला डेटा

मेटाडाटा

SDMX में, मेटाडेटा को दो समूहों में विभाजित किया गया है:

• संरचनात्मक मेटाडेटा सांख्यिकीय डेटा का वर्णन करने और पहचान करने के लिए उपयोग की जाने वाली अवधारणाओं का एक समूह है।
• संदर्भ मेटाडेटा अवधारणाओं का एक बड़ा समूह है जो डेटा सेट को परिभाषित और योग्य करता है और जो आमतौर पर अवलोकन या डेटा की एक श्रृंखला का वर्णन नहीं करता है, लेकिन संपूर्ण डेटा सेट या यहां तक ​​कि संगठन जो डेटा प्रदान करता है। संदर्भ मेटाडेटा आमतौर पर पाठ या HTML प्रारूप में होता है और उन अवधारणाओं का उपयोग करता है जो डेटा की सामग्री, कार्यप्रणाली और गुणवत्ता का वर्णन करते हैं।

मेटाडेटा संरचना विवरण मेटाडेटा संरचना परिभाषा ( MSD ) में मेटाडेटा सेट कैसे व्यवस्थित किए जाते हैं, इसमें संदर्भ मान (DSDs के समान) की जानकारी शामिल है। विशेष रूप से, एमएसडी वर्णन करता है कि मेटाडेटा के आदान-प्रदान में क्या शामिल है और अवधारणाएं एक-दूसरे से कैसे संबंधित हैं, उन्हें कैसे दिखाया जाएगा (पाठ या मूल्यों से निर्देशिका के रूप में) और किस प्रकार की वस्तु (एजेंसी, डेटाफ़्लो, डेटा प्रदाता, डेटासेट, आदि) के साथ। वे जुड़े हुए हैं।

संदर्भ मेटाडेटा सेट ( METADATASET ) मेटाडेटा संरचना के अनुसार सांख्यिकीय दृष्टिकोण, डेटा या डेटा संरचना, प्रकाशन कैलेंडर, डेटा गुणवत्ता आदि प्रदान करने वाले संगठन का सीधे वर्णन करने वाली जानकारी है।

यूरोपीय सेंट्रल बैंक की वेबसाइट पर संदर्भ मेटाडेटा प्रस्तुत करना

सामग्री दिशानिर्देश

सामग्री-उन्मुख दिशानिर्देश एसडीएमएक्स मानक के भीतर दिशानिर्देशों का एक सेट है। उनका लक्ष्य संगठनों के बीच डेटा और मेटाडेटा के आदान-प्रदान में अधिकतम अनुकूलता है। सांख्यिकीय संगठनों के बीच उनके उपयोग को यथासंभव प्रोत्साहित किया जाता है। मुख्य दस्तावेज हैं:

• क्रॉस-डोमेन अवधारणा सूची
• सांख्यिकीय विषय क्षेत्रों
• सामान्य मेटाडेटा शब्दकोश

क्रॉस-डोमेन कॉन्सेप्ट सूची में सांख्यिकीय अवधारणाओं की एक सूची है जो सांख्यिकीय प्रक्रिया और डेटा गुणवत्ता से संबंधित है। यह सूची अंतर्राष्ट्रीय प्रायोजक संगठनों द्वारा उपयोग की जाने वाली अवधारणाओं पर आधारित है। यह संपूर्ण नहीं है और भविष्य में इसका पूरक होगा।

अवधारणाओं का उपयोग डेटा और मेटाडेटा दोनों के लिए किया जा सकता है। प्रत्येक अवधारणा में एक अद्वितीय कोड और उस संदर्भ का वर्णन होता है जिसमें इस अवधारणा का उपयोग किया जा सकता है, साथ ही साथ एसडीएमएक्स मानक में एक प्रस्तुति भी।

सांख्यिकीय विषय- ओरिएंटेड डोमेन ( कंटेंट-ओरिएंटेड डोमेन ) संयुक्त राष्ट्र आर्थिक आयोग यूरोप (UNECE) के काम के आधार पर एक शीर्ष-स्तरीय वर्गीकरण है। वर्गीकरण सांख्यिकीय डेटा और मेटाडेटा के आदान-प्रदान के संगठन में एक प्रारंभिक बिंदु प्रदान करता है।

मेटाडेटा आम शब्दावली मेटाडेटा डिक्शनरी ( MCV ) में अंतर्राष्ट्रीय संगठनों और राष्ट्रीय एजेंसियों के संरचनात्मक और संदर्भ मेटाडेटा में उपयोग की जाने वाली अवधारणाएं और संबंधित आयाम शामिल हैं। MCV एक शब्दावली है जो संचार और समझ को सरल बनाने के लिए सामान्य शब्दावली के उपयोग की सिफारिश करती है। MCV क्रॉस-डोमेन अवधारणाओं के साथ निकटता से जुड़ा हुआ है और इसमें इन सभी अवधारणाओं को भी शामिल किया गया है, जो उनकी परिभाषा और संदर्भ के विवरण को दर्शाता है।

एसडीएमएक्स के साथ काम करने के लिए आईटी उपकरण

SDMX के साथ काम करने के लिए उपकरणों की एक सूची sdmx.org पर उपलब्ध है।

संरचनात्मक मेटाडेटा के साथ काम करने का मुख्य उपकरण मेटाडेटा प्रौद्योगिकी - फ्यूजन रजिस्ट्री का विकास है। यह एक वेब एप्लिकेशन के रूप में काम करता है। दो संस्करण हैं - समुदाय (सीमित सुविधाओं के साथ मुक्त संस्करण) और एंटरप्राइज़ संस्करण (भुगतान)। यह सॉफ्टवेयर एक एकल रजिस्ट्रार (डेटा और मेटाडाटा के संग्रह और प्रसार का एक एकल बिंदु) के रूप में अंतर्राष्ट्रीय मुद्रा कोष sdmxcentral.imf.org का उपयोग करता है। यह सॉफ़्टवेयर उत्पाद SDMX समुदाय - रजिस्ट्री .sdmx.org का भी उपयोग करता है।

फ्यूजन रजिस्ट्री के नवीनतम संस्करणों ने मानक की सभी कार्यक्षमता को लगभग पूरी तरह से लागू किया है। आवेदन एसडीएमएक्स रजिस्ट्रार के रूप में भी काम कर सकता है। दुर्भाग्य से, एसडीएमएक्स प्रारूप में डेटा और मेटाडेटा उत्पन्न करने की कोई संभावना नहीं है।

डेटा स्ट्रक्चर विजार्ड - संरचनात्मक मेटाडेटा संस्करण 2.0 और 2.1 बनाने के लिए जावा-एप्लिकेशन, सभी बुनियादी एसडीएमएक्स संस्थाओं के निर्माण का समर्थन करता है।

एसडीएमएक्स कन्वर्टर यूरोस्टैट द्वारा बनाए गए एसडीएमएक्स डेटा के साथ काम करने का मुख्य उपकरण है। आपको एक्सेल, सीएसवी, एफएलआर प्रारूप में फाइलों से डेटा सेट (लेकिन मेटाडेटा नहीं) बनाने की अनुमति देता है, साथ ही विभिन्न एसडीएमएक्स प्रारूपों के बीच डेटा परिवर्तित करता है।

एक निष्कर्ष के बजाय

एसडीएमएक्स मानक के भीतर सांख्यिकीय जानकारी का मानकीकरण डेटा के प्रसार और विश्लेषण को सरल करता है। वेब-सेवाओं का उपयोग हमें सूचना के सरणियों के प्रसंस्करण को सरल बनाने और संबंधित प्रणालियों के कनेक्शन को सुनिश्चित करने की अनुमति देता है, जिससे किसी भी उपयोगकर्ता को दुनिया के विभिन्न देशों में उसके लिए ब्याज के व्यापक आर्थिक संकेतक प्राप्त करने और तुलना करने का अवसर मिलता है। एसडीएमएक्स मानक के संकेतित लाभ इंटरडैप्सडल प्रोजेक्ट के तहत वर्तमान में रूस में कार्यान्वित किए जा रहे हैं, जो कि अंतर्राष्ट्रीय संगठनों के साथ सूचना विनिमय के माध्यम से और पोर्टल प्रौद्योगिकियों का उपयोग करके उपयोगकर्ताओं को असीमित सर्कल में डेटा प्रदान करने के ढांचे के भीतर सांख्यिकीय डेटा को प्रसारित करने के अभ्यास में मानक पेश करते हैं।