ok.tech:数据解释



在此处获得活动参与者的UPD演示文稿

6月13日,我们邀请所有从事数据工作的人员前往ok.tech:数据解释,在Odnoklassniki的莫斯科办事处工作。 我们将与来自OK.ru,Mail.ru Group,ivi.ru,Yandex.Taxi和其他技术公司的同事一起讨论存储和数据库的发展,讨论不同数据存储方法的优缺点以及这些方法如何影响不同数据交互团队的便利性。

本次活动将以演讲者和听众之间的公开讨论的形式举行,因此请准备您的问题,不要犹豫。 该事件将由Alexey Chernobrovov主持。

注册参加活动。

在表演和日程安排的指导下。


Hadoop和MPP数据库之间的边界。


Yandex.Taxi分析工具开发主管Fedor Lavrentiev

Hadoop作为一种廉价且易于扩展的解决方案,已进入存储领域,用于处理松散的结构化数据。 随着时间的流逝,Hadoop中的数据获得了更多的结构性,另一方面,经典关系数据库也趋向于并行化。 现在他们正面临着。 在报告中,我想谈一谈边界在MPP世界中的位置。

DWH在Odnoklassniki中的演变。


Denis Gabaidulin,OK.ru开发人员

Odnoklassniki DWH帮助企业制定数据驱动型决策。 这是一项令人着迷,困难和负责任的任务。 我们每天处理数百亿个事件,并运行1000多个常规工作。 我们从哪里开始,我们从哪里来,我们在哪里继续前进? 为什么要编写类似的luigi,spark作业服务器并创建自己的监视程序?

切换到ClickHouse:等待我们的是


ivi.ru产品经理Olga Makarova

如果使用正确,ClickHouse不会降低速度。
我将告诉您一些情况,这些情况使我们花费了大量时间和精力,以及如何避免陷入其中。
使用CH的反模式是我们踩过的耙子。

今天在哪里使用elasticsearch。


Ilya Sereda,首席数据工程师tutu.ru

多年来在我们公司中使用Elasticsearch的过程中,我们已经解决了许多不同的问题。 我将告诉您哪种解决方案被证明是好的,哪些解决方案令人头疼。 我还将告诉您在操作过程中会发生什么,以及在解决哪些问题时我们放弃了弹性搜索,转而使用其他解决方案。

日程安排


18:30-19:00-参加者注册
19:00-19:05-来自Alexey Chernobrovov的介绍
19:05-19:20-Hadoop与MPP数据库之间的边界,分析工具开发Yandex.Taxi负责人Fedor Lavrentyev
19:20-19:35-Odnoklassniki中的DWH的演变,Denis Gabaidulin,OK.ru
19:35-19:50-切换到ClickHouse:期待已久的我们,ivi.ru产品经理Olga Makarova
19:50-20:05-如今在哪里使用Elasticsearch,首席数据工程师Ilya Sereda tutu.ru
20:05-20:30-演讲者提问
20:30-20:45-休息
20:45-22:00-讨论

注册参加活动。

Source: https://habr.com/ru/post/zh-CN452978/


All Articles