Разработчик ETL-процессов

В Университет 2035 в связи с расширением штата сотрудников требуется Разработчик ETL.

ОБЯЗАННОСТИ:

• Проектирование потоков данных;
• Загрузка и выгрузка данных скриптами SQL, Python;
• Поиск и устранение проблем в процессах обработки данных;
• Развитие/поддержка/оптимизация существующих ETL-процессов для повышения производительности и эффективности;
• Создание и настройка новых ETL-процессов;
• Выработка и экспертиза решений по организации перемещения и трансформации данных, а также построение архитектуры хранилищ/витрин данных (верхнеуровнево и детально).
• Документирование в системе confluence.

ТРЕБОВАНИЯ:

• Знание концепции построения хранилищ данных;
• Уверенное знание языка запросов SQL, опыт написания SQL запросов различной степени сложности и их оптимизации;
• Опыт работы с базами данных: PostgreSQL, MySQL;
• Опыт работы в проектах по внедрению/доработке DWH – не менее 1 года;
• Уверенное знание Python;
• Опыт работы с данными в формате xml, json, знание типов данных, их размерностей и совместимости;
• Опыт написания скриптов для загрузки данных из новых источников.

БУДЕТ КРУТО, ЕСЛИ У ТЕБЯ ЕСТЬ:

• Понимание принципов и методологии ETL-разработки;
• Опыт разработки ETL процессов;
• Опыт работы с ETL-инструментами (AirFlow , Yarn, Livy, Oozie, Spark, Hue, Neoflex Datagram);
• Понимание работы Docker, Kubernetes.

ЧТО МЫ ПРЕДЛАГАЕМ:

• Аккредитованная IT-компания;
• Официальное трудоустройство согласно ТК РФ;
• Конкурентная белая заработная плата;
• ДМС после испытательного срока;
• Работа в комфортабельном офисе на ст. метро Баррикадная (5 мин. пешком);
• Возможность работать в гибридном формате;
• График работы: пн.-пт. с 9:30 до 18:30.