Si vous voulez savoir où le vent souffle, rendez-vous au cœur même de l'ouragan.
Environ ce sentiment est venu de la participation à la conférence Google Cloud Next '19, où pendant trois jours, les développeurs, les chefs de produit, les spécialistes des données et d'autres esprits brillants ont partagé les dernières nouvelles dans le domaine du développement et de l'architecture des applications, de la sécurité, de la gestion des coûts, de l'analyse des données, du cloud hybride technologies, ML et AI, traitement de données hors serveur, etc ... 30 000 personnes, flux à travers les industries et les domaines techniques, des conférences presque non-stop. Quel remue-ménage!
Permettez-moi de vous dire quelques nouvelles importantes sur Google Cloud en 2019-2020. et ses 122 mises à jour sont incontournables, d'après les notes de Vlad Flax, PDG d'
OWOX , qui a assisté à la conférence.
Produits: Anthos (anciennement Cloud Services Platform)
Bien que le produit soit en version bêta fermée, les développeurs attendent déjà de connaître
Anthos , ce qui leur permet d'écrire et d'exécuter des applications hybrides quel que soit l'environnement de développement. Localement ou dans le cloud, vous êtes assuré du même niveau de sécurité et de facilité d'accès.
Grâce au système de conteneurs et de microservices, vos machines virtuelles, serveurs et services peuvent être lancés du monde entier (et éventuellement de la lune)
À Anthos:
- GKE On-Prem, un élément clé, est responsable de l'orchestration locale de l'infrastructure de conteneurs.
- Pour la gestion des microservices - Istio
- Pour les opportunités cloud - GCP
Bien que tout le bourrage technique soit basé sur l'open source, un tel luxe en combinaison coûte toujours de l'argent: à partir de 10 000 $ / mois. Présentation vidéo d'Anthos se renseigner
ici .
Produits: hors serveur mais toujours légèrement nuageux Cloud Run (BETA)
Une autre joie pour les développeurs, qui aidera enfin à répondre à la question de savoir comment exécuter des applications à partir d'un demi-coup sans le choix haineux entre le traitement de données local ou serveur.
Synthétisant un produit qui résout les problèmes de mise à l'échelle, de prise en charge et de paramètres de serveur, ainsi que les limites des procédures standard, des bibliothèques et des langages de solutions locales (comptage, croisement de bouledogues et de rhinocéros) pour les développeurs d'applications Web,
Cloud Run est apparu, jusqu'à présent en version bêta.
Le sens est: tirer tout ce qui est utile de ces deux approches. Placez un conteneur HTTP sans conservation d'état, fonctionnant dans n'importe quelle langue, sous lequel toutes les bibliothèques et dépendances nécessaires seront automatiquement extraites, dans un «cloud» à part entière, où les capacités du serveur seront automatiquement augmentées si la charge de trafic change. Cela semble compliqué?
Mais cela apporte vraiment plus de temps au cours du processus de développement: plus de réflexion, de choix, de demande du prix du côté serveur, le développement de conteneurs est facilement géré et adapté à l'aide du
Cloud Code . Créé, lancé, obtenu le résultat.
Gestion des API: hybridation
Apigee hybride (bêta) est une nouvelle fonctionnalité du système de gestion d'API qui offre la possibilité de gérer l'API dans des conditions hybrides inter-cloud: dans votre centre de données ou sur un environnement de cloud public.
Il comprend également de nombreuses mises à jour pour étendre l'accès aux fonctions de base de Google Cloud. Ainsi que les
API d'alerte de sécurité nécessaires.
Cela simplifie à nouveau l'exécution des tâches d'une entreprise qui souhaite aller partout de la manière la plus courte et la plus sûre.Gestion des données: partout, sur tout
La gestion des données dans Google Cloud est basée sur le principe: quelle que soit la quantité de données dont vous disposez, laissez la gestion, le déplacement et l'accès à ces données être simples. Par conséquent, cette année, les améliorations de service suivantes ont été annoncées:
- Cloud SQL sous Microsoft SQL Server (en mode d'affichage spécial)
- CloudSQL sous PostgreSQL, la version 11 est désormais prise en charge
- Copie multirégionale de Cloud Bigtable disponible
Et de nombreux problèmes de sécurité et d'accès ont été mis à jour. Par exemple, la gestion du système de
fichiers cloud de
Google Filestore a été améliorée, un système de
coordination d'accès à la base de données unifiée
est désormais plus que pratique, un accès complet à l'aide des
clés AWS V4 deviendra entièrement disponible après les tests bêta.
Pour les entreprises, il s'agit là encore d'une bonne nouvelle, car l'accès à la gestion de vos données depuis n'importe où dans le monde est accéléré et simplifié, et la base opérationnelle et logicielle et matérielle de Google Cloud s'agrandit.
Pour commencer à utiliser ce service rapidement, vous n'aurez rien à faire de surhumain. Après tout, un autre commandement de Google est de tout simplifier pour un spécialiste non technique, tout en maintenant le bon niveau de sécurité et de confidentialité.
Réseautage
Selon le type d'organisation, vous avez la possibilité de choisir l'
un des quatre schémas qui fournissent le trafic le plus rapide vers des adresses IP internes ou externes, du niveau local au niveau mondial, vers vos services Google Cloud, BigQuery ou des services SaaS tiers via VPN ou Cloud Interconnecter Soit dit en passant,
100 Gbit / s sont -ils beaucoup ou un peu pour l'interconnexion? Une telle capacité de connexion ravira tous les géants du monde des données!
De plus, la version bêta est déjà
Traffic Director , couvrant entièrement le SLA et conçue pour faire face à des centaines de produits et services à votre disposition.
Si vous avez trouvé quelle autre application vous aimeriez avoir, plus que probablement, Google a déjà publié sa version bêta.Sécurité et identité
Plus de 17 mises à
jour conçues pour vous éviter même la perte accidentelle de données, le vandalisme des informations, le phishing, etc. Protection supplémentaire pour les périmètres individuels, détection des logiciels malveillants, crypto mining ou attaques DDoS basées sur des modèles informatiques propriétaires.
Qui en sait plus sur les failles de sécurité qu'une entreprise professionnelle de collecte de données?
Analytics: le plus important et le plus intéressant
Data Fusion (bêta) est un service de fédération de données natif basé sur le cloud entièrement géré, conçu pour recevoir et intégrer des données provenant de plusieurs sources dans BigQuery. Tous les processus et structures de données ETL, quels que soient leur complexité et leur type, seront présentés dans une interface unique avec un haut niveau de protection, la commodité de la visualisation des données en temps réel et l'intégration avec d'autres services.
Et tout ce bonheur est «pour les entreprises de toutes tailles» et «sans connaissances techniques».
Sans expertise de haute technologie, grâce à des procédures standardisées, Data Fusion crée et maintient vos données au format d'un lac de données - un lac de données, une «soupe universelle» idéale pour l'analyse.
Mais du point de vue de la pratique OWOX, il y a encore beaucoup de travail avec Data Lake avant de construire une structure analytique pour les besoins commerciaux quotidiens.Le service de transfert de données BigQuery prend désormais en charge plus de 100+ applications SaaS, automatisant la collecte de données planifiée sans une seule ligne de code.
Mais si vous cherchez des solutions personnelles, vous devez toujours transpirer.Google facilite la migration de bases de données de toute taille à partir de plates-formes telles que Teradata, Amazon Redshift, Amazon S3, etc.
Cloud Dataflow SQL (déjà en version alpha complète) et Dataflow Flexible Resource Scheduling (FlexRS, en version bêta) vous permettent de configurer des flux à l'aide du SQL standard familier dans les délais pour un traitement par lots et flux également. Le système lui-même «décidera» pour vous de la méthode à appliquer dans un cas particulier.
Mais il n'y a toujours pas de meilleur moyen que de collecter des données avec une compréhension des spécificités des données marketing.Malgré le fait que Google définit bon nombre de ses produits comme ceux qui n'ont pas besoin de spécialistes «techniques», les mises à jour, les solutions et les services pour les spécialistes des données sont l'air que la société respire.
Les trois prochaines mises à jour (toutes bêta) concernent spécifiquement ces technologies à pleines dents.
Le service de numérotation automatique Cloud Dataproc résoudra la douleur des spécialistes des données avec la connexion et la déconnexion des clusters Hadoop et Spark sur la plateforme Google Cloud.
Dataproc Kerberos TLC active le mode de sécurité Hadoop sur Dataproc à l'aide de l'API de prise en charge du protocole Kerberos.
Et aussi - les fans de Presto auront la possibilité de travailler avec le
type de travail Dataproc Presto via l'API Dataproc native et d'écrire des requêtes simples à des sources disparates telles que les méta-magasins Cloud Storage et Hive.
Découvrez la version bêta de
BigQuery BI Engine , qui promet un service pour présenter l'analyse du Big Data avec un accès contrôlé aux données de la RAM, moins d'une seconde réponse aux requêtes, une stabilité élevée, une architecture BI simplifiée et un réglage des performances «intelligent».
Malgré tant d'années de développement, Google continue de couvrir de nombreux modèles «simplifiés», créant des niches pour des sociétés comme OWOX BI, qui n'ont pas peur de proposer des solutions plus précises pour les besoins de l'entreprise. De plus, le coût du moteur BigQuery BI est encore légèrement répulsif par rapport à Amazon Kinesis et ClickHouse.Un nouveau type de table de
feuilles connectées est spécialisé pour les besoins des experts en données travaillant avec BigQuery. C'est vraiment une chose pratique dont des centaines de spécialistes du monde entier rêvaient, car auparavant, il aurait fallu au moins configurer une API distincte et jouer avec les demandes. Et maintenant, tout est magnifiquement écrit dans une seule interface.
La bibliothèque BigQuery ML complète est désormais disponible avec de nouveaux types de modèles appelés à l'aide de requêtes SQL.
La version alpha de l'importation des modèles
TensorFlow vous permet désormais de les appeler directement depuis BigQuery pour créer un classificateur et des modèles prédictifs directement depuis le référentiel. Vous pouvez également enseigner, configurer et exécuter un modèle DNN directement à partir de l'interface SQL BigQuery standard. Et en général, une grande attention a été accordée à cette technologie.
AI & ML: vers le client cible
Google a préparé plus de 14 mises à jour qui simplifient le développement et la configuration d'applications sur l'IA à l'aide des services Google Cloud. Et parmi eux se trouvent 4 API réellement développées qui traitent une grande variété de tâches: de la navigation sur les vidéos de marquage automatique avec le
suivi des objets et l'annotation automatique des vidéos en streaming aux
bibliothèques de langues russes et japonaises disponibles pour le traitement NLP du texte sur les capacités ML de Google.
Mais la version bêta de
Recommendations AI est la plus attrayante.
Ce futur bonbon de service promet de devenir un conseiller personnalisé pour vos clients sans limiter la taille de l'entreprise, tout en restant entièrement conforme au RGPD.
Voici les réalisations promises possibles avec les recommandations AI:
+ 90% CTR de recommandations
+ 40% de conversion par rapport aux recommandations
+ 50% profit des recommandations
+ 5% du bénéfice total de la visite
Voici comment cela fonctionnera:
Qu'est-ce qui pourrait mal tourner? Que si l'entreprise ne connaît pas ses clients, elle ne pourra pas donner la recommandation nécessaire (à aucune étape). Le fait que la force des recommandations multipliée par la pression marketing puisse entraîner un résultat strictement opposé.
Mais en termes généraux, tout instrument doit être testé avant d'être jugé, et nous attendons avec impatience la version alpha!
Constatations principales
La tendance «sans spécialistes techniques» et la tendance «uniquement pour les spécialistes techniques» ont été mélangées, et il est maintenant important pour une entreprise d'être aussi proche que possible de toutes les technologies pertinentes afin de choisir parmi celles qui répondent aux objectifs commerciaux.
En témoigne le nombre de visiteurs de niveau C dans le monde de l'entreprise qui ont assisté à la conférence. Parce que les exigences, les douleurs et les besoins de ces spécialistes sont le moteur des affaires et des technologies avancées dans le monde entier.
Surtout, Google Cloud investit dans la simplicité de mise en œuvre de tâches complexes et de simplification de la vie de ses principaux utilisateurs - les grandes entreprises et les grandes entreprises, réalisant la nature non triviale et non linéaire des défis du traitement des données moderne. Et il transforme de plus en plus la programmation et l'utilisation des données en un art virtuose non technique interprété par Google Cloud Product Orchestra.