В SberData мы создаем платформу данных для всего Сбера. Это более 350 источников данных и 100+ Пб информации, заказ и получение данных за 15 минут и современный технологический стек работы с данными, включая собственные сборки СУБД на базе Hadoop и Greenplum.

Проект: Создание реплик систем Банка в КАП, используя собственную сборку Hadoop и собственные инструменты загрузки данных (как в пакетном, так и в потоковом режиме).

Чем предстоит заниматься:

Участие в Agile команде работающей со сложными интеграционными продуктами по развитию Корпоративной аналитической платформы Сбербанка на базе Hadoop
Разработка, внедрение трактов репликации данных и решение задач в рамках 3-й линии сопровождения.
Оптимизация и настройка производительности ETL-процессов, в т.ч. запросов к РСУБД Источников
Анализ и тестирование существующих решений в технологическом стеке Hadoop

Требования:

Навыки работы с реляционными СУБД (PostgreSQL, Oracle, MS SQL)
Навыки работы с Unix shell
Свободное владение SQL
Приветствуется опыт работы с Hadoop (HDFS, Hive, Spark, YARN)
Опыт работы с DevOps-инструментами (Jenkins, Ansible, Nexus, Git и пр.)

Условия:

Современный Agile-офис с системой умный дом и зонами отдыха
Официальное оформление с первого дня
Режим работы: 5/2
БЦ "Даниловский Форт" - м.Нагатинская/Тульская/Верхние котлы/Коломенская
Уровень заработной платы, который зависит от ваших технических знаний и навыков, состоит из оклада и годового премирования
Премирование: годовое, с учетом результатов работы команды
Социальный пакет: ДМС, спортзал, страхование жизни, возможность обучаться за счет компании, посещение корпоративного санатория в Крыму одному или с семьей
Отсутствие строгого дресс-кода
Корпоративное обучение за счет компании
Расширенный ДМС с первого дня для сотрудников и льготное страхование для близких
Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров: Okko, Сбер Маркет, Delivery Club, Самокат, Сбер Еаптека и других

Data engineer (Hadoop)