Se você quiser saber onde o vento está soprando, siga para o coração do furacão.
Aproximadamente esse sentimento veio da participação na conferência Google Cloud Next '19, onde por três dias desenvolvedores, gerentes de produto, especialistas em dados e outras mentes brilhantes compartilharam as notícias mais quentes nas áreas de desenvolvimento e arquitetura de aplicativos, segurança, gerenciamento de custos, análise de dados e nuvem híbrida tecnologias, ML e AI, processamento de dados fora do servidor, etc ... 30.000 pessoas, fluxos nas indústrias e áreas técnicas, palestras quase ininterruptas. Que agitação!
Deixe-me contar algumas notícias importantes sobre o Google Cloud em 2019-2020. e suas 122 atualizações não podem ser perdidas, com base em anotações de Vlad Flax, CEO da
OWOX , que participou da conferência.
Produtos: Anthos (anteriormente Cloud Services Platform)
Enquanto o produto está na versão beta fechada, os desenvolvedores já estão aguardando conhecimento do
Anthos , o que lhes permite escrever e executar aplicativos híbridos, independentemente do ambiente de desenvolvimento. Localmente ou na nuvem, você garante o mesmo nível de segurança e facilidade de acesso.
Graças ao sistema de contêiner e microsserviço, suas máquinas, servidores e serviços virtuais podem ser lançados de todo o mundo (e possivelmente da lua)
Em Anthos:
- O GKE On-Prem, um elemento chave, é responsável pela orquestração local da infraestrutura de contêineres.
- Para gerenciamento de microsserviços - Istio
- Para oportunidades na nuvem - GCP
Embora todo o material técnico seja baseado em código aberto, esse luxo combinado ainda custa dinheiro: de US $ 10.000 / mês. Apresentação em vídeo da Anthos, consulte
aqui .
Produtos: fora do servidor, mas ainda pouco nublado Cloud Run (BETA)
Outra alegria para os desenvolvedores, que finalmente ajudarão a responder à pergunta de como executar aplicativos a partir de um pontapé sem a opção odiosa entre o processamento de dados local ou do servidor.
Sintetizando um produto que resolve os problemas de dimensionamento, suporte e configurações do servidor e as limitações de procedimentos padrão, bibliotecas e idiomas de soluções locais (contagem, cruzamento de bulldogs e rinocerontes) para desenvolvedores de aplicativos da Web, o
Cloud Run apareceu até agora na versão beta.
O significado é: pegue tudo o que for útil dessas duas abordagens. Coloque um contêiner HTTP sem preservação de estado, trabalhando em qualquer idioma, sob o qual todas as bibliotecas e dependências necessárias serão puxadas automaticamente, em uma "nuvem" completa, onde as capacidades do servidor serão puxadas automaticamente se a carga de tráfego mudar. Parece complicado?
Mas realmente traz mais tempo para valorizar durante o processo de desenvolvimento: não é mais necessário pensar, escolher, pedir o preço do servidor, o desenvolvimento de contêineres é facilmente gerenciado e adaptado usando o
Cloud Code . Criado, lançado, obteve o resultado.
Gerenciamento de API: Hibridização
O Apigee hybrid (beta) é um novo recurso do sistema de gerenciamento de API que fornece a capacidade de gerenciar a API em condições híbridas de nuvem cruzada: em seu data center ou em um ambiente de nuvem pública.
Ele também inclui muitas atualizações para expandir o acesso às funções básicas do Google Cloud. Bem como as
APIs de alerta de segurança necessárias.
Isso novamente simplifica a execução das tarefas de uma empresa que deseja seguir o caminho mais curto e seguro para todos os lugares.Gerenciamento de dados: em qualquer lugar, em qualquer coisa
O gerenciamento de dados no Google Cloud é baseado no princípio: não importa quantos dados você tenha, permita que o gerenciamento, a movimentação e o acesso a esses dados sejam simples. Portanto, este ano foram anunciadas as seguintes melhorias no serviço:
- Cloud SQL no Microsoft SQL Server (no modo de exibição especial)
- Agora o CloudSQL no PostgreSQL, versão 11, é suportado
- Cópia multi-regional do Cloud Bigtable disponível
E muitos problemas de segurança e acesso foram atualizados. Por exemplo,
o gerenciamento do sistema de arquivos em nuvem do
Google Filestore foi aprimorado, um
sistema de coordenação de acesso a banco de dados unificado agora
é mais do que conveniente.
Para os negócios, isso é novamente uma boa notícia, pois o acesso ao gerenciamento de dados de qualquer lugar do mundo é acelerado e simplificado, e a base operacional e de software e hardware do Google Cloud está em expansão.
Para começar a usar esse serviço em breve, você não precisará fazer nada sobre-humano. Afinal, outro mandamento do Google é simplificar tudo para um especialista não técnico, mantendo o nível adequado de segurança e privacidade.
Trabalho em rede
Dependendo do tipo de organização, você tem a opção de escolher
um dos quatro esquemas que fornecem o tráfego mais rápido para endereços IP internos ou externos, do nível local ao global, para seus serviços do Google Cloud, BigQuery ou serviços SaaS de terceiros via VPN ou nuvem Interconexão A propósito,
100 Gbps é muito ou pouco para o Interconnect? Essa capacidade de conexão irá encantar qualquer gigante do mundo dos dados!
Além disso, a versão beta já é
Diretor de Tráfego , cobrindo totalmente o SLA e projetada para lidar com centenas de produtos e serviços à sua disposição.
Se você criou outro aplicativo que gostaria de ter, provavelmente o Google já lançou sua versão beta.Segurança e Identidade
Mais de 17 atualizações projetadas para poupar até perda acidental de dados, vandalismo de informações, phishing, etc. Proteção adicional para perímetros individuais, detecção de malware, mineração de criptografia ou ataques DDoS com base em modelos de computação proprietários.
Quem sabe mais sobre falhas de segurança do que uma empresa profissional de coleta de dados?
Analytics: o mais importante e interessante
O Data Fusion (beta) é um serviço de federação de dados nativo e totalmente gerenciado, baseado na nuvem, projetado para receber e integrar dados de várias fontes no BigQuery. Todos os processos e estruturas de dados ETL, independentemente da complexidade e do tipo, serão apresentados em uma única interface com um alto nível de proteção, a conveniência da visualização de dados em tempo real e a integração com outros serviços.
E toda essa felicidade é "para empresas de todos os tamanhos" e "sem conhecimento técnico".
Sem conhecimento de alta tecnologia, graças a procedimentos padronizados, o Data Fusion cria e mantém seus dados no formato de um data lake - um data lake, uma “sopa universal” ideal para análises.
Mas, do ponto de vista da prática do OWOX, ainda há muito trabalho com o data lake antes de construir uma estrutura analítica para as necessidades diárias dos negócios.O Serviço de Transferência de Dados BigQuery agora suporta mais de 100 aplicativos SaaS, automatizando a coleta de dados agendada sem uma única linha de código.
Mas se você está procurando soluções pessoais, ainda precisa suar.O Google facilita a migração de bancos de dados de qualquer tamanho de plataformas como Teradata, Amazon Redshift, Amazon S3 e muito mais ...
O Cloud Dataflow SQL (já em alfa completo) e o Dataflow Flexible Resource Scheduling (FlexRS, em beta) permitem configurar fluxos usando o padrão SQL familiar na programação para processamento em lote e fluxo igualmente. O próprio sistema “decidirá” para você qual método aplicar em um caso específico.
Mas ainda não há maneira melhor do que coletar dados com um entendimento das especificidades dos dados de marketing.Apesar de o Google definir muitos de seus produtos como aqueles que não precisam de especialistas "técnicos", atualizações, soluções e serviços para especialistas em dados são o ar que a corporação respira.
As próximas três atualizações (todas beta) se relacionam especificamente a essas tecnologias complexas.
O serviço de chamada automática do Cloud Dataproc resolverá o problema dos especialistas em dados ao conectar e desconectar os clusters Hadoop e Spark no Google Cloud Platform.
O Dataproc Kerberos TLC ativa o modo de segurança Hadoop no Dataproc usando a API de suporte ao protocolo Kerberos.
E também - os fãs do Presto terão a oportunidade de trabalhar com o
tipo de trabalho Dataproc Presto por meio da API nativa do Dataproc e escrever consultas simples para fontes diferentes, como os meta-repositórios Cloud Storage e Hive.
Conheça a versão beta do
BigQuery BI Engine , que promete um serviço para apresentar análise de big data com acesso controlado aos dados da RAM, menos de uma segunda resposta a consultas, alta estabilidade, arquitetura de BI simplificada e ajuste de desempenho "inteligente".
Apesar de tantos anos de desenvolvimento, o Google continua a abranger muitos modelos "simplificados", criando nichos para empresas como a OWOX BI, que não têm medo de apresentar soluções mais precisas para as necessidades dos negócios. Além disso, o custo do BigQuery BI Engine ainda é um pouco repulsivo comparado ao Amazon Kinesis e ClickHouse.Um novo tipo de tabela de
folhas conectadas é especializado para as necessidades dos especialistas em dados que trabalham com o BigQuery. Isso é realmente uma coisa conveniente que centenas de especialistas em todo o mundo sonhavam, porque antes teria sido necessário pelo menos configurar uma API separada e mexer com solicitações. E agora tudo está maravilhosamente escrito em uma única interface.
A biblioteca completa do BigQuery ML agora está disponível com novos tipos de modelos chamados usando consultas SQL.
A versão alfa da importação de modelos do
TensorFlow agora permite chamá-los diretamente do BigQuery para criar um classificador e modelos preditivos diretamente do repositório. Você também pode ensinar, configurar e executar um modelo DNN diretamente da interface SQL padrão do BigQuery. E, em geral, muita atenção foi dada a essa tecnologia.
AI e ML: em direção ao cliente-alvo
O Google preparou mais de 14 atualizações que simplificam o desenvolvimento e a configuração de aplicativos na IA usando os serviços do Google Cloud. E entre eles estão 4 APIs realmente desenvolvidas que lidam com uma ampla variedade de tarefas: da navegação em vídeos com marcação automática com
rastreamento de objetos e anotação automática de vídeos em fluxo contínuo até
bibliotecas de idiomas russo e japonês disponíveis para processamento de PNL de texto em capacidades ML do Google.
Mas a versão beta do
Recomendations AI é mais atraente.
Este futuro serviço de doces promete se tornar um consultor personalizado para seus clientes sem limitar a escala dos negócios, mantendo-se totalmente compatível com o GDPR.
Aqui estão as realizações prometidas possíveis com as Recomendações AI:
+ 90% CTR de recomendações
+ 40% de conversão das recomendações
+ 50% de lucro com recomendações
+ 5% do lucro total das visitas
Veja como isso funcionará:
O que poderia dar errado? Que, se a empresa não conhecer seus clientes, não poderá dar a recomendação necessária (a qualquer momento). O fato de que a força das recomendações multiplicada pela pressão de marketing pode causar um resultado estritamente oposto.
Mas, em termos gerais, qualquer instrumento precisa ser testado antes de ser julgado, e estamos ansiosos pela versão alfa!
Principais conclusões
A tendência "sem especialistas técnicos" e a tendência "apenas para especialistas técnicos" foram misturadas, e agora é importante que uma empresa esteja o mais próxima possível de todas as tecnologias relevantes para escolher dentre aquelas que atendem aos objetivos de negócios.
Isso é evidenciado pelo número de visitantes de nível C do mundo corporativo que participaram da conferência. Porque os requisitos, dores e necessidades desses especialistas constituem a força motriz de negócios e tecnologia avançados em todo o mundo.
Acima de tudo, o Google Cloud investe na simplicidade de implementar tarefas complexas e simplificar a vida de seus principais usuários - grandes corporações e grandes empresas, percebendo a natureza não trivial e não linear dos desafios do processamento de dados moderno. E está transformando cada vez mais a programação e o trabalho com dados em uma arte não técnica virtuosa, realizada pela Google Cloud Product Orchestra.