khorost.tech Khorost.tech
  • Инфраструктура
  • Go
  • Docker
    • Базы данных
    • Архитектура
    • Kubernetes
    • Хранилища
    • Python
    • Наблюдаемость
    • Безопасность
    • Фото и игры
    • Сообщения
    • Performance
    • Языки
    • Zig
    • Rust
    • Java
    • AI
    • Инструменты
    • Все публикации
    • Все разделы
    • Серии и карты
  • Поиск
  • Заметки
  • Теги
  • Обо мне

Airflow

Батч-пайплайны и оркестрация: ETL vs ELT, Airflow, dbt
28.10.2026

Батч-пайплайны и оркестрация: ETL vs ELT, Airflow, dbt

Батч-пайплайн на Airflow 3, dbt и PostgreSQL против эталона генератора: что стоит смена бизнес-правила в ETL и в ELT, что остаётся в хранилище после повтора и после падения загрузки посреди дня, какой день на самом деле берёт задача в Airflow 3 при обычном, ручном и backfill-запуске, что делает depends_on_past со сбоем, сколько поздних данных теряет инкрементальная витрина и что оставляют повторы неидемпотентной задачи. Всё — счётом строк против эталона

#data-engineering #airflow
Все публикации Все разделы Обратная связь Telegram-канал Обсуждение RSS
© 2026 Александр Хохлов. MIT License