Data observability и lineage: наблюдаемость самих данных
Пайплайн зелёный, а данные за день не пришли, источник добавил колонку или перешёл на рубли. Четыре инцидента за две недели против восьми детекторов объёма, свежести, схемы и распределения и порога, подобранного задним числом: какой порог тревожит каждые выходные, какой не видит смены единиц, какой ловит всё без ложных тревог. И lineage из dbt через OpenLineage в Marquez: что ниже по потоку задето на уровне таблиц и на уровне колонок. Всё — счётом против эталона генератора