Dari episentrum Google Cloud Next '19: Catatan bidang CEO

Jika Anda ingin tahu dari mana angin itu berasal, pergilah ke jantung badai.

Kira-kira perasaan ini datang dari menghadiri konferensi Google Cloud Next '19, di mana selama tiga hari para pengembang, manajer produk, spesialis data, dan orang-orang cerdas lainnya berbagi berita terpanas di bidang pengembangan aplikasi dan arsitektur, keamanan, manajemen biaya, analisis data, hybrid cloud teknologi, ML dan AI, pemrosesan data di luar server, dll. ... 30.000 orang, mengalir melintasi industri dan bidang teknis, hampir tanpa henti kuliah. Aduh!

Biarkan saya memberi tahu Anda beberapa berita penting tentang Google Cloud pada 2019-2020. dan 122 pembaruannya tidak dapat dilewatkan, berdasarkan catatan dari Vlad Flax, CEO OWOX , yang menghadiri konferensi.

Produk: Anthos (sebelumnya Platform Layanan Cloud)

Meskipun produk ini dalam versi beta tertutup, tetapi pengembang sudah menunggu untuk berkenalan dengan Anthos , yang memungkinkan mereka untuk menulis dan menjalankan aplikasi hybrid terlepas dari lingkungan pengembangan. Secara lokal atau di cloud, Anda dijamin memiliki tingkat keamanan yang sama dan kemudahan akses.

Berkat sistem wadah dan microservice, mesin, server, dan layanan virtual Anda dapat diluncurkan dari seluruh dunia (dan mungkin bulan)



Dalam Anthos:

• GKE On-Prem, elemen kunci, bertanggung jawab untuk orkestrasi lokal dari infrastruktur kontainer.
• Untuk manajemen layanan mikro - Istio
• Untuk Peluang Awan - GCP

Meskipun semua isian teknis didasarkan pada open source, kemewahan dalam kombinasi masih membutuhkan biaya: dari $ 10.000 / bulan. Presentasi video Anthos bertanya di sini .

Produk: off-server tetapi masih sedikit mendung Cloud Run (BETA)

Kegembiraan lain untuk pengembang, yang pada akhirnya akan membantu menjawab pertanyaan tentang bagaimana menjalankan aplikasi dari setengah tendangan tanpa pilihan penuh kebencian antara pemrosesan data lokal atau server.

Mensintesis produk yang memecahkan masalah penskalaan, dukungan dan pengaturan server, dan keterbatasan prosedur standar, pustaka, dan bahasa solusi lokal (hitungan, melintasi bulldog dan badak) untuk pengembang aplikasi web, Cloud Run telah muncul, sejauh ini beta.

Artinya adalah: ambil semua yang berguna dari dua pendekatan ini. Tempatkan wadah HTTP tanpa pelestarian negara, berfungsi dalam bahasa apa pun, di mana semua pustaka dan dependensi yang diperlukan akan ditarik secara otomatis, dalam "cloud" lengkap, di mana kapasitas server akan ditarik secara otomatis jika beban lalu lintas berubah. Kedengarannya rumit?

Tapi itu benar-benar membawa lebih banyak waktu ke nilai selama proses pengembangan: tidak ada lagi berpikir, memilih, menanyakan harga sisi server, pengembangan kontainer mudah dikelola dan diadaptasi menggunakan Cloud Code . Dibuat, diluncurkan, dapatkan hasilnya.

Manajemen API: Hibridisasi

Apigee hybrid (beta) adalah fitur baru dari sistem manajemen API yang menyediakan kemampuan untuk mengelola API dalam kondisi cloud-hybrid: di pusat data Anda atau di lingkungan cloud publik.

Ini juga mencakup banyak pembaruan untuk memperluas akses ke fungsi dasar Google Cloud. Serta API peringatan keamanan yang diperlukan.

Ini lagi menyederhanakan pelaksanaan tugas-tugas bisnis yang ingin pergi ke jalan terpendek dan teraman di mana-mana.

Manajemen data: di mana saja, apa saja

Manajemen data di Google Cloud didasarkan pada prinsip: tidak peduli berapa banyak data yang Anda miliki, biarkan manajemen, perpindahan, dan akses ke data ini menjadi sederhana. Oleh karena itu, tahun ini perbaikan layanan berikut diumumkan:

• Cloud SQL di bawah Microsoft SQL Server (dalam mode tampilan khusus)
• CloudSQL di bawah PostgreSQL, versi 11 sekarang didukung
• Salinan Multi-regional Cloud Bigtable tersedia

Dan banyak masalah keamanan dan akses mendapat pembaruan mereka. Sebagai contoh, manajemen sistem file cloud Google Filestore telah ditingkatkan, sistem koordinasi akses basis data terpadu sekarang lebih dari nyaman, akses penuh menggunakan kunci AWS V4 akan tersedia sepenuhnya setelah pengujian beta.

Untuk bisnis, ini lagi-lagi berita baik, karena akses untuk mengelola data Anda dari mana saja di dunia dipercepat dan disederhanakan, dan basis operasional serta perangkat lunak dan perangkat keras untuk Google Cloud sedang berkembang.

Untuk mulai menggunakan layanan ini segera Anda tidak perlu melakukan apa-apa manusia super. Lagi pula, perintah Google yang lain adalah menyederhanakan semuanya untuk spesialis non-teknis, sambil menjaga tingkat keamanan dan privasi yang tepat.

Jaringan

Tergantung pada jenis organisasi, Anda memiliki opsi untuk memilih satu dari empat skema yang menyediakan lalu lintas tercepat ke alamat IP internal atau eksternal, dari tingkat lokal ke tingkat global, ke layanan Google Cloud, BigQuery atau layanan SaaS pihak ketiga melalui VPN atau Cloud Interkoneksi Omong-omong, apakah 100 Gbps banyak atau sedikit untuk Interconnect? Kapasitas koneksi seperti itu akan menyenangkan setiap raksasa di dunia data!

Selain itu, beta ini sudah menjadi Direktur Lalu Lintas , sepenuhnya mencakup SLA dan dirancang untuk mengatasi ratusan produk dan layanan yang Anda inginkan.

Jika Anda datang dengan aplikasi lain yang ingin Anda miliki, kemungkinan besar, Google telah merilis beta-nya.

Keamanan dan Identitas

Lebih dari 17 pembaruan yang dirancang untuk menyelamatkan Anda bahkan dari kehilangan data yang tidak disengaja, pengrusakan informasi, phishing, dll. Perlindungan tambahan untuk perimeter individu, deteksi malware, crypto mining, atau serangan DDoS berdasarkan pada model komputasi berpemilik.

Siapa yang tahu lebih banyak tentang kelemahan keamanan daripada perusahaan pengumpulan data profesional?

Analisis: yang paling penting dan menarik

Data Fusion (beta) adalah layanan federasi data berbasis cloud asli yang dikelola sepenuhnya yang dirancang untuk menerima dan mengintegrasikan data dari berbagai sumber ke BigQuery. Semua proses ETL dan struktur data, terlepas dari kerumitan dan jenisnya, akan disajikan dalam satu antarmuka dengan tingkat perlindungan tinggi, kenyamanan visualisasi data waktu-nyata dan integrasi dengan layanan lain.

Dan semua kebahagiaan ini adalah "untuk bisnis dari semua ukuran" dan "tanpa pengetahuan teknis".

Tanpa keahlian teknologi tinggi, berkat prosedur standar, Data Fusion membuat dan memelihara data Anda dalam format danau data - danau data, "sup universal" ideal untuk analitik.

Tetapi dari sudut pandang praktik OWOX, masih ada banyak pekerjaan dengan data lake sebelum membangun struktur analitis untuk kebutuhan bisnis sehari-hari.

Layanan Transfer Data BigQuery sekarang mendukung lebih dari 100 aplikasi SaaS, mengotomatiskan pengumpulan data terjadwal tanpa satu baris kode.

Tetapi jika Anda mencari solusi pribadi, Anda masih harus berkeringat.

Google memudahkan untuk memigrasi basis data dalam berbagai ukuran dari platform seperti Teradata, Amazon Redshift, Amazon S3, dan banyak lagi ...

Cloud Dataflow SQL (sudah dalam alpha penuh) dan Penjadwalan Sumber Daya Fleksibel Dataflow (FlexRS, dalam versi beta) memungkinkan Anda untuk mengonfigurasikan stream menggunakan SQL Standar yang dikenal sesuai jadwal untuk pemrosesan batch dan stream yang sama. Sistem itu sendiri akan "memutuskan" untuk Anda metode mana yang diterapkan dalam kasus tertentu.

Tetapi masih belum ada cara yang lebih baik selain mengumpulkan data dengan pemahaman tentang spesifik data pemasaran.

Terlepas dari kenyataan bahwa Google mendefinisikan banyak produknya sebagai produk yang tidak memerlukan spesialis "teknis", pembaruan, solusi, dan layanan untuk spesialis data adalah udara yang dihembuskan korporasi.

Tiga pembaruan berikutnya (semua beta) berkaitan secara khusus dengan teknologi-teknologi ini.

Layanan autocalling Cloud Dataproc akan menyelesaikan rasa sakit spesialis data dengan menghubungkan dan memutuskan cluster Hadoop dan Spark di Google Cloud Platform. Dataproc Kerberos TLC memungkinkan mode keamanan Hadoop pada Dataproc menggunakan API dukungan protokol Kerberos.

Dan juga - penggemar Presto akan memiliki kesempatan untuk bekerja dengan jenis pekerjaan Dataproc Presto melalui API Dataproc asli dan menulis pertanyaan sederhana untuk sumber yang berbeda seperti Cloud Storage dan meta-store Hive.

Memenuhi versi beta dari BigQuery BI Engine , yang menjanjikan layanan untuk menghadirkan analisis data besar dengan akses terkontrol ke data dari RAM, respons kurang dari satu detik terhadap pertanyaan, stabilitas tinggi, arsitektur BI yang disederhanakan, dan tuning kinerja "pintar".

Meskipun telah bertahun-tahun pengembangan, Google terus mencakup banyak model "sederhana", menciptakan ceruk untuk perusahaan seperti OWOX BI, yang tidak takut untuk menghasilkan solusi yang lebih akurat untuk kebutuhan bisnis. Juga, biaya BigQuery BI Engine masih sedikit menjijikkan dibandingkan dengan Amazon Kinesis dan ClickHouse.

Jenis tabel baru, Connected sheets, disesuaikan dengan kebutuhan ahli data yang bekerja dengan BigQuery. Ini benar-benar hal yang nyaman yang diimpikan oleh ratusan spesialis di seluruh dunia, karena sebelumnya diperlukan setidaknya untuk mengkonfigurasi API terpisah dan mengacaukan permintaan. Dan sekarang semuanya ditulis dengan indah ke dalam satu antarmuka.

Pustaka BigQuery ML lengkap kini tersedia dengan model model baru yang dipanggil menggunakan kueri SQL.

Versi alpha dari impor model TensorFlow sekarang memungkinkan Anda untuk memanggil mereka langsung dari BigQuery untuk membuat classifier dan model prediksi langsung dari repositori. Anda juga dapat mengajar, mengkonfigurasi, dan menjalankan model DNN langsung dari antarmuka SQL BigQuery standar. Dan secara umum banyak perhatian diberikan pada teknologi ini.

AI & ML: menuju target pelanggan

Google telah menyiapkan lebih dari 14 pembaruan yang menyederhanakan pengembangan dan konfigurasi aplikasi pada AI menggunakan layanan Google Cloud. Dan di antara mereka ada 4 API yang benar-benar dikembangkan yang menangani berbagai tugas: mulai dari navigasi video penandaan otomatis dengan pelacakan objek dan anotasi otomatis video streaming ke perpustakaan bahasa Rusia dan Jepang yang tersedia untuk pemrosesan NLP teks pada kapasitas ML dari Google.

Tapi AI versi beta paling menarik.

Permen layanan masa depan ini berjanji untuk menjadi penasihat yang dipersonalisasi untuk pelanggan Anda tanpa membatasi skala bisnis, sambil tetap sepenuhnya mematuhi GDPR.

Berikut adalah pencapaian yang dijanjikan yang dimungkinkan dengan Rekomendasi AI:
+ 90% RKPT rekomendasi
+ 40% konversi dari rekomendasi
+ Keuntungan 50% dari rekomendasi
+ 5% dari total laba dari kunjungan

Begini cara kerjanya:


Apa yang bisa salah? Bahwa jika bisnis tidak mengenal pelanggannya, ia tidak akan dapat memberikan rekomendasi yang diperlukan (pada tahap apa pun). Fakta bahwa kekuatan rekomendasi dikalikan dengan tekanan pemasaran dapat menyebabkan hasil yang sangat berlawanan.

Tetapi secara umum, instrumen apa pun perlu diuji sebelum dinilai, dan kami menantikan versi alfa!

Temuan utama

Tren "tanpa spesialis teknis" dan tren "hanya untuk spesialis teknis" telah dicampuradukkan, dan sekarang penting bagi bisnis untuk sedekat mungkin dengan semua teknologi yang relevan untuk memilih dari mereka yang memenuhi tujuan bisnis.

Ini dibuktikan dengan jumlah pengunjung C-level ke dunia korporat yang menghadiri konferensi. Karena persyaratan, rasa sakit, dan kebutuhan spesialis ini merupakan kekuatan pendorong bisnis dan teknologi canggih di seluruh dunia.

Yang terpenting, Google Cloud berinvestasi dalam kesederhanaan dalam mengimplementasikan tugas-tugas kompleks dan menyederhanakan kehidupan pengguna utamanya - perusahaan besar dan perusahaan besar, menyadari sifat tantangan pemrosesan data modern yang non-sepele dan non-linear. Dan semakin mengubah pemrograman dan bekerja dengan data menjadi seni non-teknis virtuoso yang dilakukan oleh Google Cloud Product Orchestra.