Тебя ждут два приятных летних вечера, разбавленные рассказами про один из инструментов трансформации данных, который всё ещё набирает популярность на рынке открытых решений.
Мы хотим поделиться ценным опытом, который стоил нам десятки, а то и сотни кружек кофе, а кому-то и несколько бессонных ночей.
Присоединяйся, будет интересно!
DataVault в GreenPlum на основе автоматизированного создания dbt-моделей
19:05 - 19:30
Дмитрий сделает обзор ELT в новом DWH X5 Digital с примерами автоматизации рутинных операций сопровождения ELT.
Ещё Дмитрий расскажет о создании кастомного генератора dbt-моделей для трансформации данных до детального слоя.
Data Engineer at X5 Digital
Дмитрий Тирских
27 ИЮЛЯ
ПРОГРАММА
Любовь и восторг: как мигрировать 40+ DS/PA на dbt
19:35 - 20:00
Алмаз расскажет, что такое dry-run и почему он важен (технический и психологический аспекты).
А ещё Алмазподелится, как сделал dbt dry-run в своём окружении: Ephemeral metastore, создание «почти» прод-окружения и пляски с dbt — Databricks job clusters.
Data Engineer at Picsart
Алмаз Мурзабеков
Автоматическое создание экспозиций в dbt
20:05 - 20:15
Кирилл расскажет, как перестать портить дашборды бизнеса во время работы инженеров и как получить зависимости из всех сервисов вокруг — redash, qlik sense, git, api.
Data Engineer at Space307
Кирилл Романихин
Автоматизация вокруг dbt (чего не хватает в коробке)
20:15 - 20:30
Станислав расскажет про миграции, проверку кода, документацию и работу с остальными сервисами платформы данных.
Data Platform Engineer at Space307
Станислав Лысиков
Оркестрация dbt jobs для Dev, Test, Prod без головной боли
Расскажет про главные критерии при выборе, что с чем сравнивать, когда что лучше использовать и почему. А ещё поделится тем, какие есть подводные камни и плюсы.
Analytics Engineer at Wheely
Артемий Козырь
20 ИЮЛЯ
ПРОГРАММА
Modern Data Stack, а стоит ли игра свеч?
19:35 - 20:00
Никита расскажет об опыте попытки построения analytical platform решения чисто на managed service, расскажет про технологии, преимущества и недостатки и поговорит про понятия Modern Data Stack в целом.
А в конце доклада Никита поделится выводами по опыту работы в Modern Data Stack за полтора года.
ex-Lead Data Engineer at NabuMinds
Nik B
Описание метрик в dbt
20:05 - 20:15
Венера разберёт пример описания бизнес-метрик через механизм документации в dbt.
BI Analyst at Space307
Венера Насырова
CI/CD и оркестрация онпрем, когда адаптеров много
20:15 - 20:30
Станислав расскажет о том, как собирать, проверять и запускать трансформы в dbt, когда хранилищ данных больше одного.