Как реализован ETL?

Используется связка Apache Airflow + Spark. Платформа автоматически создает скрипты загрузки и объединения данных источников с последующей записью в аналитическую СУБД. Существует возможность самому писать скрипты, если требуются уникальные сценарии трансформации.