20 сентября 2026
Оригинал
Как вкатиться в Data Engineering с нуля? 🗺 Самая частая ошибка новичков - пытаться сразу выучить весь стек Python, SQL, Spark, Kafka, Airflow, Docker, Kubernetes… Через несколько месяцев человек знает десятки названий, но не может самостоятельно собрать даже простой пайплайн 🥸 Поэтому идти лучше поэтапно ⬇️ 1️⃣ Сначала база На старте нужны: 📍 Python : функции, структуры данных, файлы, исключения и основы ООП 📍 SQL :…
482 просмотров
17 сентября 2026
Оригинал
CDC и Debezium: как передавать изменения, а не выгружать всю таблицу заново? Допустим, заказы интернет-магазина 🟧 хранятся в MySQL, а отчёты строятся в ClickHouse 🏠 . Данные между ними нужно регулярно обновлять. Можно каждый раз копировать всю таблицу. Но с ростом данных это занимает больше времени и нагружает источник. Здесь пригодится Debezium — инструмент, который отслеживает изменения в базе и передаёт их дальше…
724 просмотров
13 сентября 2026
Оригинал
Тебе тоже кажется, что забываешь быстрее, чем учишь? Недавно менти поделился проблемой: пока учит тему, всё понятно. Через месяц возвращается, многое уже забыл. Думаю всем знакомо… ☹️ Полез почитать на эту тему. Много полезного нашёл в книге «Запомнить всё» Питера Брауна и соавторов . Некоторые приёмы знакомы ещё со школы и универа 🤔 . Сам так делал, особо не задумываясь, почему помогает) Простое перечитывание часто…
966 просмотров
