ETL-разработчик (Data Engineer) Москва

СберСпасибо – самая большая банковская программа лояльности в России. Участники копят бонусы за покупки по карте и обменивают их на скидки у партнеров.

70 миллионов участников программы

10 000 транзакций в секунду

> 1000 региональных и федеральных партнеров

Сегодня наша команда развивает единую программу лояльности экосистемы Сбера.

Это крутой проект и у тебя есть возможность принять в нем участие!

Стек: PostgreSQL, Greenplum, DBT, Minio, ClickHouse, SQL, Python, Kafka, Rest API

Чем предстоит заниматься:

• Настроить пайплайн автоматической проверки качества данных;
• Написать скрипты для загрузки новых источников;
• Создать витрины для команды розницы и product analysis;
• Оптимизировать ежедневную загрузку хранилища;
• Подружить процессы выгрузок данных из DWH с Kafka.

Что ждем от вас:

• Крепкие знания SQL (оптимизация запросов, физические соединения таблиц);
• Уверенные знания Python;
• Опыт работы с промышленными ETL (DBT как преимущество, SAS DI, Informatica, ODI, DataStage);
• Понимание принципов проектирования хранилищ данных;
• Опыт работы с MPP (GP как преимущество)/ колоночными СУБД (Clickhouse как преимущество);
• Опыт работы в Linux на уровне пользователя
• Опыт работы разработчиком DWH от 2 лет.

Было бы здорово, если ты:

• знаком с Git;
• работал с Python 3.8.13;
• имеешь представление (или практический опыт работы) об Airflow (у нас не используется);
• слово Kafka для тебя не в новинку, либо ты не прочь разобраться что это такое.

Что мы предлагаем:

• Стильный офис около м. Кутузовская;
• Работа в аккредитованной IT компании;
• Возможность работать как в офисе, так и из дома;
• Льготная ипотека для сотрудников;
• Корпоративный спорт;
• Расширенный ДМС с первого дня работы (страхование жизни и здоровья, страховка выезжающего за границу, льготное страхование близких и т.д.);
• Обучение в Корпоративном университете Сбера;
• Скидки, бонусы и специальные предложения от экосистемы Сбера и партнёров.

Если нравится автоматизировать рутинные процессы, оптимизировать процесс загрузки данных в хранилище и обучаться новому — ждём в СберСпасибо!