Мы – команда “Данные по анализу благосостояния”, которая создает, развивает и поддерживает хранилище данных и расчеты по продуктам для аналитических сервисов мобильного приложения Сбербанк Онлайн в разделах “Всего средств” и “Календарь выплат”.

Мы ищем Middle Data инженера хранилищ данных, способного принять активное участие в развитии аналитического слоя хранилища данных, в построении витрин, логик расчетов и контролей качества данных по направлениям PFM Персональное финансовое планирование. Данная роль предусматривает: активное участие в разработке витрин и MVP-решений по требованиям от бизнес-заказчиков, в сборке и развертывании дистрибутивов для внедрения на ПРОМ, в развитии модели хранения данных и помощь в решении инцидентов по обращениям от пользователей приложения Сбербанк Онлайн.

Что нужно делать:

Разрабатывать процессы сборки, обработки и поставки данных в Hadoop на Spark
Развивать архитектуру проекта и адаптировать ее под новые требования
Собирать и анализировать требования бизнеса по получению новых данных, оценивать наличие и качество данных
Проводить системное, функциональное и интеграционное тестирование
Разрабатывать и внедрять эффективные методики контроля качества данных
Участвовать в code review и создавать инструменты для упрощения работы команды

Мы ждем, что ты:

Имеешь опыт разработки на Spark (желательно Spark/Scala)
Знаком с инструментами экосистемы Hadoop: Hive, Spark
Хорошие знания SQL, опыт оптимизации запросов
Общий стаж работы не менее 5 лет
Высшее техническое образование
Будешь проактивен в работе с внешними и внутренними контрагентами
Высокий уровень внимательности и ответственности при работе с кодом и документацией.

Будет плюсом:

Опыт работы с Kafka
Работал с реляционными и MPP СУБД (Oracle, Teradata, GreenPlum, MS SQL Server и т.д.)
Изучал или внедрял DevOps практики
Опыт проектирования DWH

Мы предлагаем:

Deep diving в предметную область, много разработки по задачам, имеющим прямой эффект на бизнес
Возможность привносить новые идеи и нестандартные решения
Сообщество D-people– поддержка, развитие и возможность учиться у профессионалов
Достойную оплату труда
ДМС, сниженные ставки по кредитованию, программы лояльности для сотрудников
Современный офис рядом с метро Кутузовская, бесплатный фитнес в офисе

Ты получишь знания и опыт работы со стеком BigData-разработки и аналитики:

Scala, Apache Spark
Apache Kafka, Apache Hadoop (HDFS, HBase, Hive)
Инструменты DevOps
GreenPlum