Big Data Engineer (Junior)

О нашем продукте1. Мы делаем Единое Хранилище данных по всем процессам Банка России. А это почти полный охват финансового рынка и всех связанных сущностей, требуемых для контроля и прогнозирования развития экономики в целом и участников в частностиОсновная задача – загрузить и получить на выходе максимально полные и достоверные данные по каждой сущности в удобном для дальнейшего использования виде.2. Мы делаем приложения на базе Единого хранилища данных.

Responsibilities:

• разработка и оптимизация процессов обработки данных с использованием фреймворка Apache Spark;
• внедрения ML-моделей в рамках MLOps;
• разработка CI/CD-пайплайнов для автоматизированного развёртывания программных продуктов;
• участие в доработке ML и Big Data приложений;;

Requirements:

• высшее техническое образование;
• готовы рассматривать кандидатов без опыта работы с профильным высшим образованием;

Необходимые знания:

• хорошие знания в Python;
• хорошие знания в SQL;
• приветствуется опыт в Linux

• желание развиваться в области Big Data, ML, DevOps;

Terms:

• гибридный график работы: 40% - офис.