В кросс-функциональную команду управления подготовки и обработки данных требуется Data Engineer для работы с BigData хранилищем

Обязанности:

построение витрин данных (Hive-SQL, Spark) с погружением в бизнес-процессы и аналитику данных;
уточнение требований заказчика, системный анализ, изучение бизнес-процессов систем источников;
поддерживать и тестировать витрины данных;
настраивать ETL процесс загрузки данных из первоисточников;
осуществлять постановку требований и приемку прототипов к единому хранилищу данных;
выстраивание процессов Data Governance на инфраструктуре Hadoop совместно с CDO Банка;
контроль качества данных в хранилище (Hadoop) – постановка задач, анализ;
участие в проектах связанных с витринами данных, банковским хранилищем, MLOps.

Требования:

высшее образование;
опыт работы с ИТ-системами и базами данных от 3 лет по направлению крупных корпоративных клиентов и клиентов МСБ
желателен опыт работы в банковской сфере от 1 года;
T-SQL, PL-SQL, Hadoop на продвинутом уровне (опыт создания сложных запросов, постановка процедур на расписание, администрирование БД);
Python (знание основных библиотек для работы с данными);
уверенные знания основных банковских процессов (достаточно одного): кредитование, процессинг, депозиты; работа системным аналитиком будет преимуществом;
уверенные знания SQL;
знание планировщиков процессов (AirFlow, Oozie);
опыт работы с BI системами и средствами визуализации;