Podcasts · Research Insights Made Simple
rims-covers-jpg
· 1 h 11 min · Episode 6
Episode rims-covers-jpg
В этом выпуске подкаста про инсайты ко мне в гости пришел Николай Голов для того, чтобы обсудить то, как строить дата платформы в 2025 году:) Коля исполняет роль head of data engineering at ManyChat, а до этого он был head of data platform в Авито. Коля знает все о том как построить OLAP и OLTP системы, интенсивно работающие с данными.
За время подкаста мы обсудили темы
• Как развивалась карьера Коли в разных компаниях и как он стал преподавать базы данных параллельно с основной работой • Как можно строить платформы данных (централизованно, гибридно и децентрализованно) • Как выглядят принципы федерализации данных (аля data mesh) в теории • Во что этот подход превращается на практике • Как строить дата платформы в стартапах, средних, а также крупных компаниях в 2025 году • Что не так с классическими базами данных (Postgres и иже с ним) • Что не так с MPP базами данных (Vertica, Greenplum, ClickHouse, ...) • Как data mesh превращается в data mash и как цепочки дата продуктов работают на практике • Как выделять базовый домен данных, чтобы уменьшить длину цепочек дата продуктов • Почему облачные аналитические базы так быстры: колоночное хранение + разделение storage и compute • Что такое medalion architecture • Куда дальше будут развиваться технологии обработки данных и почему нельзя полагаться на старые подходы и ограничения
Дополнительные материалы
• Статья из периода работы в Avito "Vertica+Anchor Modeling = запусти рост своей грибницы" • Статьи из периода работы в Manychat: 1 и 2 • Запись "Data Modeling Meetup Munich: From Data Vault to Anchor Modeling with Nikolai Golov" • Запись "DataVault / Anchor Modeling / Николай Голов" • Научная статья "Golov N., Ronnback L., Big Data Normalization for Massively Parallel Processing Databases" //Computer Standards & Interfaces, 09-May-2017, https://doi.org/10.1016/j.csi.2017.01.009 • Научная статья "Golov N., Filatov A., Bruskin S.,Efficient Exact Algorithm for Count Distinct Problem", Computer Algebra in Scientific Computing, July 2019
Links in the notes 5
- https://habr.com/ru/companies/avito/articles/322510/
- https://medium.com/manychat-team/do-we-really-need-data-modeling-in-the-world-of-the-modern-data-stack-92b69c172031
- https://medium.com/manychat-team/data-modeling-in-the-world-of-the-modern-data-stack-2-0-da0ca426dd82
- https://www.youtube.com/watch?v=FnfNnn-EZok
- https://www.youtube.com/watch?v=-ZgzpQXsxi0
Shows are listed from Apple Podcasts' charts and directory, and Podcast Index where it is used. Every show and episode belongs to its publisher and plays from the publisher's own feed; this site hosts none of them. Explicit shows are for adult profiles only, and children’s profiles hear only children’s shows. More about this list.