Avito Kafka-Treffen: Konnektoren, Integration, Clouds

Hallo! Am Donnerstag, den 23. Januar, findet unsere erste Mitap über Apache Kafka statt. Wir werden über Integration, Source-Konnektoren und den Start skalierbarer Anwendungen in Kubernetes sprechen. Die Vorträge werden von den Ingenieuren von Booking.com, Confluent und Avito gehalten.


Wir treffen uns um 18:00 Uhr. Registrieren Sie sich und laden Sie Kollegen ein. Unter dem Kürzel - Leistungsankündigungen ein Link zur Anmeldung und Videoübertragung der mitap.



Berichte


Anschlüsse: warum bist du so viele - Anatoly Soldatov, Avito


Bild


Martin Kleppman hat kürzlich einen Netflix-Artikel zum neuen CDC-Connector auf Twitter kommentiert: "Netflix hat einen eigenen CDC-Connector (Change Data Capture) für MySQL und PostgreSQL erstellt ... obwohl es vielleicht besser ist, einen Beitrag zu Debezium zu leisten?" In meinem Vortrag werde ich einen kurzen Überblick über Quell-Konnektoren geben. Betrachten Sie als Nächstes die Vor- und Nachteile bekannter Konnektoren für PostgreSQL, einschließlich Debezium. Schließlich werde ich versuchen, Martins Tweet zu beantworten und Ihnen zu erklären, warum wir beschlossen haben, unseren eigenen CDC-Konnektor in Avito zu erstellen, und wie es dazu kam.



Wie kann man Apache Kafka zähmen? Booking.com Erfahrung - Alexander Mironov, Booking.com


Bild


Mit allen Funktionen von Apache Kafka ist die Integration und Wartung nicht einfach. In dem Bericht erkläre ich Ihnen, wie wir dieses Problem bei Booking.com lösen, wo Kafka und der darauf aufbauende Service als Hauptprodukt für das Streaming von Daten verwendet werden. Wir werden im Detail untersuchen, wie ein relativ kleines Team die Kontrolle über Dutzende von Clustern behält, die Datensicherheit gewährleistet und auch gemeinsam über die Fehler und Probleme lacht oder weint, die wir lösen mussten.



Kafka über Kubernetes: Ist Juan Sombrero Juan zufolge? - Victor Gamow, Zusammenfluss


Bild


Wenn Sie sich für die effizienteste verteilte Echtzeit-Streaming-Verarbeitungsplattform entscheiden müssen, liegt die Antwort heute auf der Hand - das ist Apache Kafka! Wenn Sie eine skalierbare Anwendung mit hoher Ausfallsicherheit, Redundanz, Lastenausgleich und Containern in der Cloud bereitstellen möchten, benötigen Sie Kubernetes.

Und wenn Sie diese Schlangen und Igel überqueren, erhalten Sie eine skalierbare Anwendung, die Streams in Echtzeit in der Cloud verarbeitet. Großartig, nicht wahr? Aber ist es so einfach? Sind die von den Basis-Kubernetes bereitgestellten Lego-Bausteine ​​ausreichend, um ernsthafte verteilte Systeme zu betreiben, die einen Zustandsspeicher erfordern?

Ich bin Victor Gamov, Developer Advocate von Confluent. Ich werde Ihnen helfen, den ganzen Zoo zu verstehen und die Frage zu beantworten: "Soll ich Apache Kafka und seine anderen Komponenten starten sowie Anwendungsflüsse auf Kubernetes verarbeiten?".


Passwörter und Erscheinungsbilder


Mitap beginnt am 23. Januar um 18:00 Uhr. Die Teilnahme ist kostenlos, aber Sie müssen sich registrieren . Bitte geben Sie im Antragsformular Ihren tatsächlichen Vor- und Nachnamen an. Vergessen Sie nicht, Ihren Reisepass oder Führerschein mitzubringen, um am Veranstaltungstag einen Pass an der Rezeption zu erhalten.


Adresse: Avito Büro, Lesnaya 7 .


Wenn Sie nicht zur Besprechung kommen können, sehen Sie sich die Live-Übertragung auf dem YouTube-Kanal von AvitoTech an . Es wird möglich sein, Fragen live zu stellen, die wir den Sprechern vortragen werden.


Bis dann!

Source: https://habr.com/ru/post/de483894/


All Articles