🟢Кому Spark Meetup полезен?
🔹инженерам данных и аналитикам данных
🔹программистам со знанием Spark и Scala
🔹всем смежным специальностям из телекома, банков, промышленности и ретейла
Программа:
18:30 – 19.00 Welcome: регистрация участников, кофе и снеки
19:00 – 19:40 Доклад 1: Особенности работы различных spark commiters при работе с S3. Спикер: Андрей Лобастов, руководитель группы контроля процессов обработки данных, «Криптонит»
19:40 – 20.20 Доклад 2: Будущее Spark: Dynamic Allocation в Kubernetes с Uniffle, Gluten и Comet. Спикер: Дмитрий Зуев, руководитель отдела инжиниринга данных в Positive Technologies
20:20 – 21.00 Доклад 3: Spark и Trino когда вместе, когда нет. Спикер: Дмитрий Лахвич, руководитель платформы данных m2.ru
21:00 – 21.30 Дискуссия о трендах развития Spark. Модератор: Иван Попович, руководитель направления обработки данных, «Криптонит»
21:30 – 22:00 Нетворкинг и свободное общение
Event at a glance
- Who it is for
- data engineers, data analysts, Spark developers, Scala developers
- Main topics
- Apache Spark, data engineering, big data
- What you will gain
- understand Spark committer patterns with S3, learn about Spark dynamic allocation on K8s, compare Spark and Trino use cases
- Program format
- deep technical talks, production cases