Булат Усманов — Data Lineage: как настроить в зоопарке технологий и зачем это нужно

Подробнее о конференции SmartData:
— — Скачать презентацию с сайта SmartData —
Data Lineage — это важный инструмент для отслеживания пути данных от источника до конечного использования, включающий все этапы преобразования и перемещения данных. В докладе рассмотрели, как настроить Data Lineage с использованием DataHub для разнородных источников и какие преимущества это принесет: принятие обоснованных решений, снижение операционных рисков, повышение доверия к данным, ускорение Time To Market. Рассмотрели шаги для интеграции DataHub с различными системами, такими как Kafka, Trino, dbt, Airflow, PostgreSQL, ClickHouse, S3, Tableau, Metabase и т. д. и кратко познакомились с реальными примерами успешного внедрения.