Data Engineer (Due Diligence)

Анализ финансовой активности клиентов банка (юридические лица) в рамках кредитования, мониторинга, оценки рисков и других процессов банка.

Работа команды позволяет выявлять негативные факторы деятельности компаний заемщиков в процессе кредитования. Результат нашей работы улучшает процесс для сотрудников Банка.

Преимущественно, обработка больших данных и разработка витрин данных на Spark (Scala) с использованием pySpark. Базы данных PostgreSQL. Код храним в Bitbucket, DevOps трубы создаем на Jenkins.

Обязанности:

• анализ бизнес требований на разработку витрин

• разработка промышленных витрин данных c использованием Hive, Spark и вывод их в ПРОМ.

Требования:

• опыт работы в области Data Engineer от одного года

• знание SQL – продвинутый уровень (запросы, Join`ы, агрегаты, группировки, вложенные запросы)

• знание python: стандартные структуры данных (dict, list, set, модуль collections), pandas, numpy, h5py

• опыт работы с Hadoop (Hive, Spark, HBase) является плюсом

• знание Git

• опыт разработки витрин данных и выстраивания логического слоя данных

• опыт работы с обработкой больших массивов данных

• опыта по выводу витрин в промышленную эксплуатацию (подготовка документации, сопровождение процесса).

Инструменты BigData:

• Hadoop (Hive, Spark, Kafka, Oozie)

• языки программирования (Scala, Java, Python)

• инструменты DevOps (Git, Nexus, Jenkins).

Условия:

• офис в шаговой доступности от метро Кутузовская, отсутствие дресс-кода

• никакой бюрократии, все не связанные с разработкой задачи выполняют выделенные роли в команде

• полная свобода действий, важен результат

• отличная команда опытных инженеров

• регулярное обучение hard и soft скиллам в нашем корпоративном университете

• ДМС, страхование жизни, скидки для сотрудников, льготная ипотека от Сбербанка

• регулярный пересмотр заработной платы в зависимости от результатов

• бесплатный фитнес и тренажерный зал.