Senior data engineer/ DWH architect

Оплата не указана

Spice Agency

г. Москва

Требуемый опыт работы

От 3 до 6 лет

Тип занятости

Полная занятость

График работы

Полный день

Крупнейший в России инфраструктурный холдинг находится в поиске "Senior data engineer/ DWH architect».

Задачи:

  • Проектирование целевой архитектуры платформы данных;
  • Разработка и внедрение компонентов платформы данных;
  • Организация загрузки данных из различных источников (внутренние БД, файловые хранилища, API, web-ресурсы);
  • Создание SQL витрин и процедур;
  • Формирование системы контроля и мониторинга целостности и качества данных;
  • Подготовка и поддержание в актуальном состоянии каталога метаданных;
  • Выстраивание процесса CI/CD совместно с DevOps;
  • Code review и наставничество команды DE.

Требования:

  • Высшее образование (техническое, математическое, экономическое);
  • Глубокое понимание принципов проектирования архитектуры хранилищ данных DWH (Data vault/Inmon/Kimball);
  • Опыт проектирование и разработки хранилищ данных от 5 лет. В роли Team lead от 1 года;
  • Опыт разработки и организации ETL на Python (Airflow, Nifi, Prefect) от 2 лет;
  • Уверенное знание SQL, опыт разработки сложных запросов и процедур в (MS SQL, Postgres - преимущество) от 5 лет;
  • Опыт выстраивания CI/CD (DataOps);
  • Опыт внедрения Kafka, RabbitMQ, dbt, Airflow, Greenplum/Clickhouse – сильное преимущество;
  • Linux;
  • Автономность, навыки самостоятельного поиска технических решений.

Условия:

Возможность реализовать ключевые проекты для компании.

  • Оформление строго по ТК РФ;
  • Конкурентоспособная з/п + годовой бонус;
  • Гибридный формат работы/удаленный формат работы;
  • ДМС, софинансирование питания.

Ключевые навыки

Python
Sqlite
Postgresql
Apache kafka
Apache airflow
Sql/mongodb/postgressql,clickhouse
Greenplum
Dwh
Cpp-netlib

Контактная информация

Spice Agency

Вакансия опубликована 24.10.2024 в г. Москва.

Похожие вакансии

#

от 100 000 до 200 000 ₽

Москва

Удаленная работа

Подробное описание

17 апреля

#

Москва

Павелецкая

Удаленная работа

Подробное описание

23 октября

#

Москва

Удаленная работа

Подробное описание

9 июля