Всё, что нужно знать о dbt & modern data stack
Приглашаем на митап, где опытные специалисты поделятся открытиями, реальными кейсами и лучшими практиками работы с dbt.
Никита Юрасов
Senior Software Engineer в Earlybird VC, автор dbt-af (https://github.com/Toloka/dbt-af)
Тема: Жизнь после dbt: как строить DWH с SQLMesh
Все где-то слышали или даже видели туториалы по SQLMesh, но как же в действительности живётся с ним в продакшене, и так ли он хорош, как его описывают в статьях и блогах? В этом докладе поговорим об инфраструктуре DWH на SQLMesh, сравним с dbt и обсудим слабые места “next-generation data transformation framework”.
Все где-то слышали или даже видели туториалы по SQLMesh, но как же в действительности живётся с ним в продакшене, и так ли он хорош, как его описывают в статьях и блогах? В этом докладе поговорим об инфраструктуре DWH на SQLMesh, сравним с dbt и обсудим слабые места “next-generation data transformation framework”.
Александр Клейн
Staff Data Engineer из ведущей компании в сфере доставки и ритейла. Ex: Luxoft, Точка, Альфа-банк.
Тема: Как построить данные, которым доверяют?
Роль метаданных в современной работе с данными. Как справиться с хаосом в отчётах и KPI, как выстраивать управление метаданными через бизнес-глоссарий, каким образом автоматизировать генерацию метаданных, а также зачем нужен семантический слой - на эти вопросы найдём ответы в презентации. Дополнительно обсудим как качественные метаданные становятся основой для AI-инструментов, и почему именно они определяют доверие к данным.
Роль метаданных в современной работе с данными. Как справиться с хаосом в отчётах и KPI, как выстраивать управление метаданными через бизнес-глоссарий, каким образом автоматизировать генерацию метаданных, а также зачем нужен семантический слой - на эти вопросы найдём ответы в презентации. Дополнительно обсудим как качественные метаданные становятся основой для AI-инструментов, и почему именно они определяют доверие к данным.
Тема: Почему мы перешли на микробатчи dbt и как довели их до ума
Разбор новой инкрементальной стратегии dbt на практике. Посмотрим, как она упрощает обработку больших таблиц и какие проблемы имеет из коробки. Покопаемся под капотом и доработаем стратегию с помощью макросов, чтобы полноценно заменить is_incremental.
Разбор новой инкрементальной стратегии dbt на практике. Посмотрим, как она упрощает обработку больших таблиц и какие проблемы имеет из коробки. Покопаемся под капотом и доработаем стратегию с помощью макросов, чтобы полноценно заменить is_incremental.
Principal data engineer в NXP Semiconductors, сооснователь школы INZHENERKA.TECH
Павел Рословец
Nik B
Автор тг - канала Analytics Engineer в мире данных
Тема: Архитектор хаоса: роль Data Engineer в GenAI реальности
Генеративные модели и дата-агенты автоматизируют всё — от ETL до мониторинга. Data Engineer становится архитектором гибридных систем, где важно не только строить пайплайны, но и управлять их эволюцией и контролем. Как DE может влиять на качество, безопасность и развитие данных в эпоху внедрения GenAI решений? И как GenAI продукты можно делать с DE экспертизой.
Генеративные модели и дата-агенты автоматизируют всё — от ETL до мониторинга. Data Engineer становится архитектором гибридных систем, где важно не только строить пайплайны, но и управлять их эволюцией и контролем. Как DE может влиять на качество, безопасность и развитие данных в эпоху внедрения GenAI решений? И как GenAI продукты можно делать с DE экспертизой.
СПИКЕРЫ
начало в 19:00 (+3 GMT)
Партнеры, которые поддерживают dbt & modern data stack Meetup
INZHENERKA.TECH
Авторские тренажеры для инженеров и аналитиков данных.
Авторские тренажеры для инженеров и аналитиков данных.
dbt & modern data stack
Большое чат-сообщество в telegram по dbt для аналитиков и инженеров
Большое чат-сообщество в telegram по dbt для аналитиков и инженеров
Analytics Engineer в мире данных
Авторский канал про мир данных.
Авторский канал про мир данных.
Полезный бонус для аналитиков и инженеров данных: мы перевели документацию по dbt на русский язык и регулярно актуализируем её.
