Apache NiFi. 28 de novembro, na sala de conferências Deworkacy

Oi

Em duas semanas, hospedaremos nosso mitap do Apache NiFi, uma útil ferramenta de entrega de dados OpenSource. Vamos falar sobre casos ao vivo e discutir várias abordagens técnicas para seu uso.

Haverá 4 palestrantes, uma pessoa nossa e nossos colegas do Centro de Desenvolvimento Tinkoff, ER-Telecom e Arenadata Software.



Sob o corte - uma lista de relatórios e um link para o registro.

Como escrever seu próprio processador (19.00 - 19.30)


Vladislav Mirkos, Desenvolvedor, Departamento de Tecnologias de Dados, Rostelecom

Vladislav trabalha na Rostelecom há 2 anos na equipe de desenvolvimento de sistemas do armazém, participa da implementação de projetos para entrega de dados ao armazém, trabalhou com muitas ferramentas ETL.

Em seu relatório, ele dirá como começar a escrever seus processadores quando for necessário e por que expandir a funcionalidade do kit de ferramentas de entrega. Usando um exemplo concreto, abordaremos os principais estágios: da ideia à entrega e à produção.

Fluxo de Viagem. Do desenvolvimento à produção e retorno (19.30 - 20.00)


Bronislav Zhitnikov, Desenvolvedor Líder , Tinkoff Development Center LLC

Bronislav passou do suporte através da análise e teste de sistemas ao desenvolvimento (incluindo a arquitetura de vários sistemas). Em Tinkoff, durante um ano e meio, ele lidera a equipe de desenvolvimento de mecanismos para integrar dados externos ao Storage, agora o grupo é chamado NiFi-Core. Escreve em Java, Python e SQL.

O relatório abordará como, no Centro de Desenvolvimento de Tinkoff, os processos desenvolvidos são entregues ao ambiente de produção e como os processos são finalizados. Onde eles começaram e que dificuldades enfrentaram - e para onde chegaram.

Como simplificar a vida de desenvolvedores e engenheiros. Expanda Kafka e Nifi em dois cliques (20,20 - 20,50)


Ella Kurginyan, líder da equipe de desenvolvimento de software da Arenadata

Por três anos, Ella trabalhou como desenvolvedora em um dos integradores em vários projetos, depois desejou algo eterno e de mercearia, e entrou na Arenadata. Atualmente, ele é o chefe da equipe de desenvolvimento da Arenadata Streaming Platform, um produto baseado em Kafka e Nifi.

Ele falará sobre como você pode economizar tempo e esforço ao implantar ambientes para desenvolver fluxos em Nifi e não apenas. Ele mostrará como é fácil administrar, atualizar e expandir os clusters Nifi e Kafka, compartilhar o roteiro interno e indicar onde entrar em contato com solicitações de recursos.

Usando o Apache NiFi como um microsserviço (20.50 - 21.20)


Evgeny Goryachev, arquiteto do sistema de recomendação de TV interativa, ER-Telecom

Ele se dedica à integração, desenvolvimento e operação do sistema de recomendação por 3 anos, bem como ao ciclo completo do projeto, desde o desenvolvimento e orquestração de serviços até ferramentas para analisar a eficiência do produto do sistema. Usa o NiFi não apenas para ETL, mas também como um serviço descentralizado universal.

Ele falará sobre a abordagem do uso do NiFi como microsserviço para a produção rápida e o lançamento de um serviço de protótipo com versões clássicas para microsserviços, Docker-containerização, entrega e orquestração de contêineres no produto.

A participação é gratuita, a página de inscrição está aqui .

28 de novembro, começamos a partir das 18h30.
Moscou, aterro de Bersenevskaya, 6 p. 3, Deworkacy, sala de aula

Source: https://habr.com/ru/post/pt475860/


All Articles