Advertise on podcast: DE or DIE: Talks

Is the data engineer still the “worst seat at the table?” Thoughts on the past, present, and future of tooling, processes, and culture in our industry.

Здесь мы обсуждаем статью 4 Things You Need to Know When Solving for Data Quality из дайджеста #10 К нам присоединяется Сергей Ярымов, вместе с которым мы говорим про лайнэйдж, зачем он нежен, кто как его делает и, в частности, как его делает Slack. В процессе выпуска всплыл тул sqlglot — парсер и транспайлер SQL, написанный на голом пайтоне.

Обсуждаем Hudi, Delta Lake, Iceberg и Kafka rebalance protocol По мотивам дайджеста #7 • Hudi, Iceberg and Delta Lake: Data Lake Table Formats Compared • Apache Kafka Rebalance Protocol, or the magic behind your streams applications • Big Data World, Part 4: Architecture

илотный выпуск подкаста DE or DIE Здесь мы обсуждаем статью и видео по мотивам недавно прошедшего Data Quality Meetup #4 из дайджеста #6 • Представляемся • Разговариваем про тестирование пайплайнов • Проблемы фейковых данных • Закономерности • Правила генерации • Опаздывающие данные • Lineage • Metadata Management • SmartData