Data Manager / Senior Data Engineer

Центр Исследований и Аналитики — это ваш помощник в мире больших данных. Мы работаем для того, чтобы вы могли принимать точные кадровые решения, основанные на анализе данных, а также для автоматизации аналитики данных инструментами AI. Наша миссия — сделать ваш бизнес эффективнее благодаря использованию современных технологий и глубокой экспертизе специалистов, и моделям AI.

Стек: Greenplum, PostgreSQL, Hadoop, Hive, Spark, SberETL, Kafka

Обязанности

• обеспечить взаимодействие с CDO блока, PO команд по поиску и предоставлению данных
• обеспечить взаимодействие с SberData по описанию витрин, публикации в СМД, поддержке задач ККД и других инициатив SberData
• обеспечить регулярный импорт внешних данных в хранилище GreenPlum / Hadoop, реализуемый на внутренних ETL-продуктах
• разработать и реализовать концепт работы с Лабораториями Данных для потребностей Data Science и аналитиков
• участвовать в разработке единой внутренней модели данных Хранилища Данных для эффективного хранения и использования данных из разных источников, обеспечить её заполнение загружаемыми данными.
• организовать перенос данных и оптимизацию расчётов из старых систем (legacy), выводимых из использования
• обеспечить реализацию процесса загрузки источников в Хранилище Данных и предоставления витрин потребителям
• участвовать в составлении и подписании SLA/TLA витрин потребителям.

Требования

• опыт работы в ролях Data Manager / Senior Data Engineer, с функцией составления качественного FSD и ведения документации
• отличный уровень владения SQL, оптимизация запросов, аналитические функции, написание расчетных функций и функций перекладки данных
• опыт работы с данными - Архитектура данных, Модели данных, Слои хранилища – на уровне проектирования сущностей; Data Quality
• опыт взаимодействия с кибербезопасностью банка и в согласовании Концептуальной Архитектуры в части работы с данными
• опыт работы в Agile команде, понимание релизного процесса вывода продукта в ПРОМ; DevOps, Git, Bitbucket, DevFlow
• опыт разработки (от 5 лет) для реляционных БД или MPP
• опыт работы с PostgreSQL / GreenPlum / Hadoop
• опыт работы с ETL/ELT инструментами.

желательно:

• Понимание архитектуры Greenplum, отличия MPP от реляционных СУБД
• Понимание архитектуры Hadoop, опыт работы с Hive, Spark
• Опыт работы по производственному процессу банка, опыт Delivery в части IT процессов.

Условия

• AgileHome рядом со станцией метро Кутузовская со всеми удобствами: столовые + множество кафе + кухни с холодильниками, кофемашинами и т.п; бесплатный спортзал; бесплатная подземная парковка на 1000+ мест; места для отдыха - настольный теннис, несколько playstation, кикер, бильярд
• достойная заработная плата (оклад + премии)
• возможность работать с современным стеком технологий
• оформление по ТК РФ
• ДМС с первого рабочего дня
• огромный каталог образовательных программ, возможность обучения и сертификации за счет компании
• программа льготного кредитования в Сбербанке, корпоративная ипотека
• дисконт-программы от множества компаний партнеров
• возможность принять участие в других крупных и уникальных проектах банка.