تقوم شركة IBM بتمديد Apache Spark للإطارات الرئيسية zSystems

أعلنت شركة IBM بالفعل أن Apache Spark لنظام Linux سيتم دعمه بواسطة zSystems. سيتم تقديم مثل هذا الدعم كجزء من مشروع تحليلات المركزية. وبفضل هذا ، سيكون خبراء استخراج البيانات قادرين على استخدام Apache Spark على أجهزة الكمبيوتر المركزية القوية zSystems.

بالإضافة إلى ذلك ، قيل أن Apache Spark لن يعمل كخدمة على منصة Bluemix فحسب ، بل سيدمج النظام أيضًا مع حلول سحابية وتحليلية أخرى ، بما في ذلك حل Cloudant NoSQL ومنصة التخزين السحابي SashDB. سيتمكن المطورون الذين يستخدمون Bluemix من دمج مشروعاتهم مع الحلول التحليلية و DBMS من IBM.

لقد أوفت آي بي إم الآن بمعظم وعودها بخصوص أباتشي سبارك. أولاً ، سهلت الشركة على المؤسسات الوصول إلى إمكانات تحليل البيانات باستخدام الأطر المركزية zSystems. هذا يخلق مسارات جديدة لعلماء البيانات والمطورين.

تسمح منصة IBMz / OS لـ ApacheSpark لإطار عمل Spark مفتوح المصدر بالعمل أصلاً على z / OS. وهذا بدوره يوفر الفرصة لدراسة البيانات المستلمة في الوقت الحقيقي "في الميدان" ، أي دون الحاجة إلى استخراج وتحويل وتنزيل معلومات المصدر (ETL). على سبيل المثال ، يمكن لممثلي الأعمال تحليل بيانات الشركة (المبيعات ، اتجاهات السوق ، وما إلى ذلك) ، وتغيير وتعديل عملهم بشكل سريع وفقًا لاحتياجات السوق.

يمكن للعلماء العمل مع البيانات أثناء أي تجربة ، وتلقي تقارير مفصلة عن تقدم مثل هذا العمل في الوقت الحقيقي. أي أنه لا يوجد أي تأخير عمليًا بين استلام المعلومات وتحليلها مع إصدار البيانات المجهزة.

تعمل zSystems الآن في العديد من المجالات ، بما في ذلك العلوم والأعمال المصرفية والنقل والتأمين. يحلل الحاسوب المركزي والبرمجيات الخاصة به المعاملات والبيانات على الفور ، وبناء نموذج تنبئي في نفس الوقت في إطار العملية الحالية. يساعد الجمع بين Spark و zSystems على توفير الوقت والجهد والمال. نظرًا لأن Spark يدعم التعلم الآلي ، والتعرف على اللغة الطبيعية ، وتكنولوجيا معالجة الصور ، بالإضافة إلى تقديم عدد كبير من الميزات الأخرى ، ترى IBM أن Spark بيئة بيانات كاملة. على سبيل المثال ، باستخدام خدمة IBM Datacap ، والتي تعد جزءًا من Insight Cloud Services ، يمكن للعميل تلقائيًا تصنيف محتويات المستند والتعرف عليها ، بما في ذلك تنسيقها وبنيتها ، والنص والمعلومات الرقمية.



هناك مزايا أخرى للمنصة الجديدة:

• : , Scala, Python, RandSQL .
• : , , IMS, VSAM, DB2 z/OS, PDSE SMF Apache Spark API.
• In-place : Apache Spark , . , .
• Opensource: Apache Spark open-source, .
• , IBM . Zementis ( ), Rocket Software ( ) Elite Analythics ( , zSystems).
• Zementis , SPSS, R, Python, SAS open-source . z/OS. Zementis IMS, DB2 z/OS VSAM.
• c Rocket Software Data Virtualization Service Rocket Service Spark z Systems. . , R z/OS.
• Elite Analythics zSystems. real-time Zementis SPSS, , ApacheSpark z/OS.

بشكل عام ، تسمح z / OSPlatform for Apache Spark لمتخصصي معالجة البيانات والمطورين باستخدام تنسيقاتهم وأدواتهم الخاصة لجمع وتحليل المعلومات. إذا لزم الأمر ، يمكن تخصيص الأداة المقدمة.

يحتوي المشروع الآن على نظام بيئي متطور إلى حد ما. بطريقة أو بأخرى ، يرتبط نشاط 3500 باحث ومطور من IBM الذين ينشئون مشاريعهم الخاصة على هذا الإطار بطريقة ما بالمنصة. يمكن للمتخصصين نشر أفضل ممارساتهم على GitHub .

نظام IBMz / OS لنظام Apache Spark متاح الآن للتنزيل .

Source: https://habr.com/ru/post/ar395307/