Тебя ждут два приятных летних вечера, разбавленные рассказами про один из инструментов трансформации данных, который всё ещё набирает популярность на рынке открытых решений.

Мы хотим поделиться ценным опытом, который стоил нам десятки, а то и сотни кружек кофе, а  кому-то и несколько бессонных ночей.

Присоединяйся, будет интересно!

DataVault в GreenPlum на основе автоматизированного создания dbt-моделей

19:05 - 19:30

Дмитрий сделает обзор ELT в новом DWH X5 Digital с примерами автоматизации рутинных операций сопровождения ELT.

Ещё Дмитрий расскажет о создании кастомного генератора dbt-моделей для трансформации данных до детального слоя.

Data Engineer
at X5 Digital

Дмитрий
Тирских

Любовь и восторг:
как мигрировать 40+ DS/PA на dbt

19:35 - 20:00

Алмаз расскажет, что такое dry-run и почему он важен (технический и психологический аспекты).

А ещё Алмаз поделится, как сделал dbt dry-run в своём окружении: Ephemeral metastore, создание «‎почти» прод-окружения и пляски с dbt — Databricks job clusters.

Data Engineer
at Picsart

Алмаз
Мурзабеков

Автоматическое создание экспозиций в dbt

20:05 - 20:15

Кирилл расскажет, как перестать портить дашборды бизнеса во время работы инженеров и как получить зависимости из всех сервисов вокруг — redash, qlik sense, git, api.

Data Engineer
at Space307

Кирилл
Романихин

Автоматизация вокруг dbt (чего не хватает в коробке)

20:15 - 20:30

Станислав расскажет про миграции, проверку кода, документацию и работу с остальными сервисами платформы данных.

Data Platform Engineer
at Space307

Станислав
Лысиков

Оркестрация dbt jobs для Dev, Test, Prod без головной боли

19:05 - 19:30

Артемий сделает обзор devcontainer, github actions, dbt cloud, prefect / argo workflows.

Расскажет про главные критерии при выборе, что с чем сравнивать, когда что лучше использовать и почему. А ещё поделится тем, какие есть подводные камни и плюсы.

Analytics Engineer at Wheely

Артемий
Козырь

Modern Data Stack,
а стоит ли игра свеч?

19:35 - 20:00

Никита расскажет об опыте попытки построения analytical platform решения чисто на managed service, расскажет про технологии, преимущества и недостатки и поговорит про понятия Modern Data Stack в целом.

А в конце доклада Никита поделится выводами по опыту работы в Modern Data Stack за полтора года.

ex-Lead Data Engineer at NabuMinds

Nik B

Описание метрик в dbt

20:05 - 20:15

Венера разберёт пример описания бизнес-метрик через механизм документации в dbt.

BI Analyst
at Space307

Венера
Насырова

CI/CD и оркестрация онпрем, когда адаптеров много

20:15 - 20:30

Станислав расскажет о том, как собирать, проверять и запускать трансформы в dbt, когда хранилищ данных больше одного.

Make + docker + airflow = love.

Data Platform Engineer
at Space307

Станислав
Лысиков

by Space307, 2023