Крупнейший в России инфраструктурный холдинг находится в поиске "Senior data engineer/ DWH architect».

Задачи:

Проектирование целевой архитектуры платформы данных;
Разработка и внедрение компонентов платформы данных;
Организация загрузки данных из различных источников (внутренние БД, файловые хранилища, API, web-ресурсы);
Создание SQL витрин и процедур;
Формирование системы контроля и мониторинга целостности и качества данных;
Подготовка и поддержание в актуальном состоянии каталога метаданных;
Выстраивание процесса CI/CD совместно с DevOps;
Code review и наставничество команды DE.

Требования:

Высшее образование (техническое, математическое, экономическое);
Глубокое понимание принципов проектирования архитектуры хранилищ данных DWH (Data vault/Inmon/Kimball);
Опыт проектирование и разработки хранилищ данных от 5 лет. В роли Team lead от 1 года;
Опыт разработки и организации ETL на Python (Airflow, Nifi, Prefect) от 2 лет;
Уверенное знание SQL, опыт разработки сложных запросов и процедур в (MS SQL, Postgres - преимущество) от 5 лет;
Опыт выстраивания CI/CD (DataOps);
Опыт внедрения Kafka, RabbitMQ, dbt, Airflow, Greenplum/Clickhouse – сильное преимущество;
Linux;
Автономность, навыки самостоятельного поиска технических решений.

Условия:

Возможность реализовать ключевые проекты для компании.