إذا كنت تريد أن تعرف أين تهب الرياح ، فتوجه إلى قلب الإعصار.
جاء هذا الشعور تقريبًا من حضور مؤتمر Google Cloud Next '19 ، حيث شارك مطورو ومديرو المنتجات ومتخصصو البيانات وغيرهم من العقول المشرقة لمدة ثلاثة أيام في آخر الأخبار في مجال تطوير التطبيقات والهندسة المعمارية والأمن وإدارة التكاليف وتحليل البيانات والسحابة المختلطة التقنيات ، ML و AI ، معالجة البيانات خارج الخادم ، إلخ ... 30،000 شخص ، التدفقات في الصناعات والمجالات التقنية ، محاضرات بدون توقف تقريبًا. يا له من ضجة!
اسمحوا لي أن أخبرك ببعض الأخبار المهمة عن Google Cloud في 2019-2020. ولا يمكن تفويت تحديثاته الـ 122 ، بناءً على ملاحظات فلاد
فلاك ، الرئيس التنفيذي لشركة
OWOX ، الذي حضر المؤتمر.
المنتجات: Anthos (سابقًا Cloud Services Platform)
بينما يكون المنتج في مرحلة تجريبية مغلقة ، إلا أن المطورين ينتظرون بالفعل التعرف على
Anthos ، مما يتيح لهم كتابة وتشغيل التطبيقات المختلطة بغض النظر عن بيئة التطوير. محليا أو في السحابة ، نضمن لك نفس المستوى من الأمن وسهولة الوصول.
بفضل نظام الحاوية والخدمات الصغيرة ، يمكن إطلاق أجهزتك الافتراضية والخوادم والخدمات من جميع أنحاء العالم (وربما القمر)
في أنتوس:
- GKE On-Prem ، عنصر رئيسي ، مسؤول عن التنسيق المحلي للبنية التحتية للحاويات.
- لإدارة الخدمات الدقيقة - Istio
- لفرص السحابة - برنامج شركاء Google المعتمدون
على الرغم من أن جميع الحشوات التقنية تعتمد على المصادر المفتوحة ، إلا أن هذا النوع من الرفاهية لا يزال يكلف مالًا: من 10،000 دولار شهريًا. أنثوس عرض الفيديو الاستفسار
هنا .
المنتجات: خارج الخادم ولكن لا يزال غائمًا إلى حد ما Cloud Cloud (BETA)
فرحة أخرى للمطورين ، والتي ستساعد أخيرًا في الإجابة على سؤال حول كيفية تشغيل التطبيقات من ضربة جزاء دون الاختيار البغيض بين معالجة البيانات المحلية أو الخادم.
بتوليف منتج يحل مشكلات القياس والدعم وإعدادات الخادم والقيود المفروضة على الإجراءات القياسية والمكتبات ولغات الحلول المحلية (العد ، عبور البلدغ ووحيد القرن) لمطوري تطبيقات الويب ، ظهرت
Cloud Run ، حتى الآن.
المعنى هو: خذ كل ما هو مفيد من هذين النهجين. ضع حاوية HTTP دون الحفاظ على الحالة ، والعمل بأية لغة ، والتي سيتم بموجبها سحب جميع المكتبات والتبعيات اللازمة تلقائيًا ، في "سحابة" كاملة ، حيث سيتم سحب سعة الخادم تلقائيًا في حالة تغير حمل المرور. تبدو معقدة؟
ولكنه يحقق بالفعل المزيد من الوقت للقيمة أثناء عملية التطوير: لا مزيد من التفكير ، واختيار ، وطلب سعر جانب الخادم ، تتم إدارة تطوير الحاوية بسهولة وتكييفها باستخدام
Cloud Code . خلقت ، أطلقت ، حصلت على النتيجة.
إدارة API: التهجين
Apigee hybrid (تجريبي) هي ميزة جديدة في نظام إدارة واجهة برمجة التطبيقات (API) والتي توفر القدرة على إدارة واجهة برمجة التطبيقات (API) في الظروف السحابية المختلطة: في مركز البيانات أو في بيئة سحابية عامة.
كما يتضمن العديد من التحديثات لتوسيع الوصول إلى الوظائف الأساسية في Google Cloud. وكذلك
واجهات برمجة التطبيقات في حالة تأهب الأمان .
هذا مرة أخرى يبسط تنفيذ مهام العمل الذي يريد أن يذهب بأقصر الطرق وأكثرها أمانًا في كل مكان.إدارة البيانات: في أي مكان ، على أي شيء
تعتمد إدارة البيانات في Google Cloud على المبدأ: بغض النظر عن مقدار البيانات الموجودة لديك ، دع الإدارة والتنقل والوصول إلى هذه البيانات بسيطًا. لذلك ، تم الإعلان عن تحسينات الخدمة التالية هذا العام:
- سحابة SQL تحت Microsoft SQL Server (في وضع العرض الخاص)
- CloudSQL تحت PostgreSQL ، الإصدار 11 مدعوم الآن
- نسخة متعددة المناطق من Cloud Bigtable المتاحة
حصلت العديد من مشكلات الأمان والوصول على تحديثاتها. على سبيل المثال ، تم تحسين إدارة نظام الملفات السحابية من
Google Filestore ،
وأصبح الآن
نظام تنسيق الوصول إلى قاعدة البيانات الموحدة أكثر من ملاءمة ، وسيصبح الوصول الكامل باستخدام
مفاتيح AWS V4 متاحًا بالكامل بعد الاختبار التجريبي.
بالنسبة إلى الأعمال ، فإن هذه أخبار جيدة مرة أخرى ، حيث يتم تسريع وتبسيط الوصول إلى إدارة بياناتك من أي مكان في العالم وتوسيع قاعدة التشغيل والبرامج والأجهزة لـ Google Cloud.
لبدء استخدام هذه الخدمة قريبًا ، لن تحتاج إلى القيام بأي شيء فوق طاقة البشر. بعد كل شيء ، وصية أخرى من جوجل هي تبسيط كل شيء لمتخصص غير فني ، مع الحفاظ على المستوى المناسب من الأمن والخصوصية.
الشبكات
بناءً على نوع المؤسسة ، لديك خيار اختيار
واحد من أربعة أنظمة توفر أسرع حركة مرور إلى عناوين IP الداخلية أو الخارجية ، من المستويات المحلية إلى المستويات العالمية ، إلى خدمات Google Cloud أو BigQuery أو خدمات SaaS التابعة لجهات أخرى عبر VPN أو Cloud الربط. بالمناسبة ، هل
100 جيجابت في
الثانية كثيرًا أو قليلاً للربط؟ مثل هذه القدرة على الاتصال ستسعد أي عمالقة من عالم البيانات!
بالإضافة إلى ذلك ، فإن الإصدار التجريبي هو بالفعل
مدير حركة المرور ، وهو يغطي اتفاقية مستوى الخدمة تمامًا ومصمم للتعامل مع مئات المنتجات والخدمات الموجودة تحت تصرفك.
إذا توصلت إلى تطبيق آخر ترغب في تطبيقه ، فأغلب الظن أن Google أصدرت إصدارها التجريبي بالفعل.الأمن والهوية
تم تصميم أكثر من 17 تحديثًا لإنقاذك من الفقدان العارض للبيانات أو تخريب المعلومات أو الخداع ، وما إلى ذلك. حماية إضافية للمحيط الفردي أو اكتشاف البرامج الضارة أو استخراج التشفير أو هجمات DDoS استنادًا إلى نماذج الحوسبة الخاصة.
من يعرف المزيد عن عيوب الأمان أكثر من شركة محترفة لجمع البيانات؟
تحليلات: الأكثر أهمية ومثيرة للاهتمام
Data Fusion (تجريبي) هي خدمة اتحاد بيانات مستندة إلى مجموعة النظراء مُدارة بالكامل ، مصممة لتلقي ودمج البيانات من مصادر متعددة في BigQuery. سيتم تقديم جميع عمليات ETL وهياكل البيانات ، بغض النظر عن التعقيد والنوع ، في واجهة واحدة مع مستوى عال من الحماية ، والراحة في تصور البيانات في الوقت الحقيقي والتكامل مع الخدمات الأخرى.
وكل هذه السعادة هي "للشركات من جميع الأحجام" و "بدون المعرفة التقنية".
بدون خبرة عالية التقنية ، بفضل الإجراءات الموحدة ، تقوم Data Fusion بإنشاء وصيانة بياناتك في شكل بحيرة بيانات - بحيرة بيانات ، "حساء عالمي" مثالي للتحليلات.
ولكن من وجهة نظر ممارسة OWOX ، لا يزال هناك الكثير من العمل مع بحيرة البيانات قبل بناء هيكل تحليلي لاحتياجات العمل اليومية.تدعم
خدمة BigQuery Data Transfer Service أكثر من 100 تطبيق SaaS ، مما يجعل أتمتة عملية جمع البيانات المجدولة دون سطر واحد من الكود.
ولكن إذا كنت تبحث عن حلول شخصية ، فلا يزال عليك أن تتعرق.تعمل Google على تسهيل ترحيل قواعد البيانات من أي حجم من الأنظمة الأساسية مثل Teradata و Amazon Redshift و Amazon S3 والمزيد ...
تسمح لك كل من Dataflow SQL (بالفعل في ألفا كاملة) و Dataflow Flexible Resource Scheduling (FlexRS ، في مرحلة تجريبية) بتكوين التدفقات باستخدام SQL المألوف المألوف في الجدول الزمني لمعالجة الدُفعة والدفق على قدم المساواة. سوف "يقرر" النظام نفسه بالنسبة لك الطريقة التي يجب تطبيقها في حالة معينة.
ولكن لا يوجد حتى الآن طريقة أفضل من جمع البيانات مع فهم تفاصيل بيانات التسويق.على الرغم من أن Google تعرف الكثير من منتجاتها على أنها تلك التي لا تحتاج إلى متخصصين "تقنيين" ، فإن التحديثات والحلول والخدمات لمتخصصي البيانات هي الهواء الذي تتنفسه الشركة.
التحديثات الثلاثة التالية (كلها تجريبية) تتعلق على وجه التحديد بتقنيات الأسنان هذه.
سوف تعمل
خدمة Cloud Dataproc autoscalling على حل مشكلة أخصائي البيانات من خلال ربط وفصل مجموعات Hadoop و Spark على Google Cloud Platform.
Dataproc Kerberos TLC يتيح وضع الأمان Hadoop على Dataproc باستخدام API دعم بروتوكول Kerberos.
وأيضًا - ستتاح لعشاق Presto الفرصة للعمل مع
نوع الوظيفة Dataproc Presto من خلال واجهة برمجة تطبيقات Dataproc الأصلية وكتابة استفسارات بسيطة لمصادر متباينة مثل التخزين السحابي ومستودعات Hive الوصفية.
تعرف على النسخة التجريبية من
BigQuery BI Engine ، والتي تعد بخدمة لتقديم تحليل البيانات الضخمة مع وصول متحكم به إلى البيانات من ذاكرة الوصول العشوائي ، وأقل من استجابة ثانية للاستعلامات ، والاستقرار العالي ، وبنية BI المبسطة وضبط الأداء "الذكي".
على الرغم من سنوات التطوير العديدة ، تواصل Google تغطية العديد من الطرز "المبسطة" ، مما يخلق منافذ لشركات مثل OWOX BI ، التي لا تخشى الوصول إلى حلول أكثر دقة لاحتياجات العمل. أيضًا ، لا تزال تكلفة محرك BigQuery BI Engine مثيرة للاشمئزاز مقارنة بأمازون كينيسيس و ClickHouse.يتخصص نوع جديد من جدول
الأوراق المتصلة باحتياجات خبراء البيانات الذين يعملون مع BigQuery. يعد هذا أمرًا ملائمًا حقًا يحلم به المئات من المتخصصين في جميع أنحاء العالم ، لأنه في وقت سابق كان من الضروري على الأقل تكوين واجهة برمجة تطبيقات منفصلة والفوضى مع الطلبات. والآن كل شيء مكتوب بشكل جميل في واجهة واحدة.
تتوفر الآن مكتبة BigQuery ML الكاملة مع أنواع جديدة من النماذج التي تم استدعاءها باستخدام استعلامات SQL.
تسمح لك النسخة ألفا من استيراد نماذج
TensorFlow الآن بالاتصال بهم مباشرة من BigQuery لإنشاء مصنف ونماذج تنبؤية مباشرة من المستودع. يمكنك أيضًا تعليم نموذج DNN وتكوينه وتشغيله مباشرةً من واجهة BigQuery SQL القياسية. وبشكل عام تم إيلاء الكثير من الاهتمام لهذه التكنولوجيا.
AI و ML: نحو العميل المستهدف
أعدت Google أكثر من 14 تحديثًا تبسط عملية تطوير وتكوين التطبيقات على الذكاء الاصطناعي باستخدام خدمات Google Cloud. ومن بينها 4 واجهات برمجة تطبيقات تم تطويرها بالفعل والتي تتعامل مع مجموعة واسعة من المهام: من التنقل على مقاطع الفيديو ذات العلامات التلقائية مع
تتبع الكائنات والتعليق التلقائي لمقاطع الفيديو الدفقية إلى
مكتبات اللغات الروسية واليابانية المتاحة للمعالجة اللغوية العصبية للنص على إمكانيات ML من Google.
لكن النسخة التجريبية من
التوصيات AI هي الأكثر جاذبية.
تعد حلوى الخدمة المستقبلية هذه بأن تصبح مستشارًا شخصيًا لعملائك دون الحد من حجم العمل ، مع الحفاظ على توافقها مع الناتج المحلي الإجمالي تمامًا.
فيما يلي الإنجازات الموعودة الممكنة مع التوصيات AI:
+ 90 ٪ من نسبة النقر إلى الظهور من التوصيات
+ 40 ٪ تحويل من التوصيات
+ 50 ٪ ربح من التوصيات
+ 5٪ من إجمالي الربح من الزيارة
إليك كيف ستعمل:
ما يمكن أن يحدث الخطأ؟ إذا لم تكن الشركة تعرف عملائها ، فلن تكون قادرة على تقديم التوصية اللازمة (في أي خطوة). حقيقة أن قوة التوصيات مضروبة في ضغوط التسويق يمكن أن تسبب نتيجة عكسية تمامًا.
ولكن بشكل عام ، يجب اختبار أي أداة قبل الحكم عليها ، ونتطلع إلى إصدار ألفا!
النتائج الرئيسية
تم خلط الاتجاه "بدون متخصصين تقنيين" والاتجاه "فقط للمتخصصين التقنيين" معًا ، والآن من المهم أن تكون الأعمال التجارية قريبة قدر الإمكان من جميع التقنيات ذات الصلة من أجل اختيار تلك التي تلبي أهداف العمل.
يتضح هذا من خلال عدد الزائرين من المستوى C إلى عالم الشركات الذين حضروا المؤتمر. لأن متطلبات وآلام واحتياجات هؤلاء المتخصصين تشكل القوة الدافعة للأعمال والتكنولوجيا المتقدمة في جميع أنحاء العالم.
الأهم من ذلك كله ، تستثمر Google Cloud في بساطة تنفيذ المهام المعقدة وتبسيط حياة مستخدميها الرئيسيين - الشركات الكبيرة والشركات الكبيرة ، وفهم الطبيعة غير التافهة وغير الخطية لتحديات معالجة البيانات الحديثة. وهو يعمل بشكل متزايد على تحويل البرمجة والعمل مع البيانات إلى عمل فني غير تقني تؤديه أوركسترا Google Cloud Product.