Meetup Avito Kafka: connecteurs, intégration, cloud

Salut Le jeudi 23 janvier, notre premier mitap sur Apache Kafka aura lieu. Nous parlerons de l'intégration, des connecteurs source et du lancement d'applications évolutives dans Kubernetes. Des présentations seront faites par les ingénieurs Booking.com, Confluent et Avito.


Nous nous réunissons à 18h00. Inscrivez-vous et invitez des collègues. Sous la coupe - annonces de performances, un lien vers l'enregistrement et la diffusion vidéo du mitap.



Rapports


Connecteurs: pourquoi êtes-vous si nombreux - Anatoly Soldatov, Avito


image


Martin Kleppman a récemment commenté un article Netflix sur le nouveau connecteur CDC sur Twitter: "Netflix a créé son propre connecteur CDC (Change Data Capture) pour MySQL et PostgreSQL ... bien qu'il soit préférable de contribuer à Debezium?" Dans ma présentation, je donnerai un bref aperçu des connecteurs source. Ensuite, considérez les avantages et les inconvénients des connecteurs bien connus pour PostgreSQL, y compris Debezium. À la fin, je vais essayer de répondre au tweet de Martin et de vous expliquer pourquoi nous avons décidé de fabriquer notre connecteur CDC à Avito, et ce qui en est ressorti.



Comment apprivoiser Apache Kafka? Expérience Booking.com - Alexander Mironov, Booking.com


image


Avec toutes les fonctionnalités d'Apache Kafka, il n'est pas facile à intégrer et à maintenir. Dans le rapport, je vais vous expliquer comment nous résolvons ce problème sur Booking.com, où Kafka et le service construit autour de lui sont utilisés comme produit principal pour la diffusion de données. Nous examinerons en détail comment une équipe relativement petite garde le contrôle sur des dizaines de clusters et assure la sécurité des données, et rions ensemble - ou pleurons - sur les bogues et les problèmes que nous avons dû résoudre.



Kafka sur Kubernetes: Juan Sombrero est-il selon Juan? - Victor Gamow, Confluent


image


Si vous devez choisir la plate-forme de traitement de streaming distribué en temps réel la plus efficace, la réponse est aujourd'hui évidente: il s'agit d'Apache Kafka! Si vous devez déployer une application évolutive dans le cloud, avec une haute résilience, redondance, équilibrage de charge et conteneurs, vous avez besoin de Kubernetes.

Et si vous croisez ces serpents et hérissons, vous obtenez une application évolutive qui traite les flux en temps réel dans le cloud. Super, non? Mais est-ce aussi simple que cela? Les briques Lego fournies par la base Kubernetes sont-elles suffisantes pour exécuter des systèmes distribués sérieux qui nécessitent un stockage d'état?

Je suis Victor Gamov, développeur avocat de Confluent, je vais vous aider à comprendre tout ce zoo et aussi essayer de répondre à la question "Dois-je lancer Apache Kafka et ses autres composants, ainsi que le traitement des flux d’applications sur Kubernetes?".


Mots de passe et apparences


Mitap débutera le 23 janvier à 18h00. La participation est gratuite, mais vous devez vous inscrire . Veuillez indiquer votre vrai nom et prénom dans le formulaire de demande. N'oubliez pas d'apporter votre passeport ou votre permis de conduire pour obtenir un laissez-passer à la réception le jour de l'événement.


Adresse: bureau Avito, Lesnaya 7 .


Si vous ne pouvez pas venir à la réunion, regardez la diffusion en direct sur la chaîne YouTube AvitoTech . Il sera possible de poser en direct des questions que nous poserons aux intervenants.


A très bientôt!

Source: https://habr.com/ru/post/fr483894/


All Articles