Les présentations UPD des participants à l'événement sont disponibles
iciLe 13 juin, nous invitons tous ceux qui travaillent avec des données au bureau de Moscou d'Odnoklassniki, sur ok.tech: Data Explain. Avec des collègues de OK.ru, Mail.ru Group, ivi.ru, Yandex.Taxi et d'autres sociétés technologiques, nous discuterons de l'évolution des stockages et des bases de données, discuterons des avantages et des inconvénients des différentes approches du stockage des données, ainsi que de la façon dont ces approches affectent commodité des différentes équipes d'interaction des données.
L'événement se déroulera sous la forme d'une discussion ouverte entre les intervenants et le public, alors préparez vos questions et n'hésitez pas à les poser. L'événement sera modéré par Alexey Chernobrovov.
Inscrivez-vous à l'événement.Sous un chat des thèses de performances et le programme.
La frontière entre les bases de données Hadoop et MPP.
Fedor Lavrentiev, responsable du développement d'outils d'analyse, Yandex.Taxi
Hadoop a fait irruption dans le monde du stockage en tant que solution bon marché et facilement évolutive pour le traitement de données peu structurées. Au fil du temps, les données dans Hadoop sont devenues de plus en plus structurelles et, d'autre part, il y avait une tendance à la parallélisation des bases de données relationnelles classiques. Et maintenant, ils font face. Dans le rapport, je voudrais parler de la situation actuelle des frontières dans le monde des députés.
L'évolution du DWH à Odnoklassniki.
Denis Gabaidulin, développeur chez OK.ru
Odnoklassniki DWH aide les entreprises à prendre des décisions basées sur les données. C'est une tâche fascinante, difficile et responsable. Nous traitons des dizaines de milliards d'événements quotidiennement et exécutons plus de 1000 emplois réguliers. Où avons-nous commencé et d'où venons-nous, et où allons-nous? Pourquoi avez-vous écrit vos analogues Luigi, Spark Job Server et créé votre propre monitoring?
Passer à ClickHouse: ce qui nous attendait
Olga Makarova, chef de produit chez ivi.ru
ClickHouse ne ralentit pas s'il est utilisé correctement.
Je vais vous dire quelques situations qui nous ont coûté beaucoup de temps et de nerfs, et comment ne pas y entrer.
Les antipatterns de l'utilisation de CH sont le râteau sur lequel nous avons marché.
Où utiliser elasticsearch aujourd'hui.
Ilya Sereda, Lead Data Engineer tutu.ru
Pendant de nombreuses années d'utilisation d'elasticsearch dans notre entreprise, nous avons résolu un tas de problèmes différents avec elle. Je vais vous dire quelles solutions se sont avérées bonnes et lesquelles nous ont causé des maux de tête. Je vous dirai également à quoi s'attendre pendant le fonctionnement et pour résoudre les problèmes, nous avons abandonné elasticsearch au profit d'autres solutions.
Horaire
18h30 - 19h00 - Inscription des participants
19h00 - 19h05 - Intro d'Alexey Chernobrovov
19:05 - 19:20 - La frontière entre les bases de données Hadoop et MPP, Fedor Lavrentiev, responsable du développement d'outils d'analyse Yandex.Taxi
19:20 - 19:35 - L'évolution du DWH à Odnoklassniki, Denis Gabaidulin, OK.ru
19:35 - 19:50 - Passage à ClickHouse: ce qui nous attendait, Olga Makarova, chef de produit chez ivi.ru
19:50 - 20:05 - Où utiliser elasticsearch aujourd'hui, Ilya Sereda, Lead Data Engineer tutu.ru
20 h 05 - 20 h 30 - Questions aux orateurs
20h30 - 20h45 - Pause
20h45 - 22h00 - Discussion
Inscrivez-vous à l'événement.