Мы разрабатываем потоки обработки больших массивов данных о событиях кибермошенничества, строим оперативную и аналитическую отчетность, загружаем из смежных систем, обогащаем и выгружаем данные конечным потребителям. Работаем с распределенными БД CLickhouse и Hadoop, используем Spark, Scala, Nifi, Flink.

Обязанности

• Разработка потоков обработки больших массивов данных;

• Разработка функциональности и интеграционной логики высоконагруженных и высокодоступных кластерных приложений;

• Доработка существующей функциональности, исправление багов;

• Участие в разработке высоконагруженных проектов, работа в команде;

• Оценка трудозатрат на реализацию функциональности/модулей;

• Оптимизация кода разрабатываемых/существующих модулей;

• Документирование своего кода, участие в разработке технических документов для сопровождения и сдачи системы.

Требования

Уверенные знания Scala/Java
Опыт написания тестов
Опыт работы с SQL
Уверенные знания парадигм ООП и ФП
Опыт работы с системой контроля версий Git

Желательно:

Опыт разработки и проектирования ETL-пайплайнов
Знание Spark Batch/Streaming
Опыт работы с оркестраторами Airflow/Oozie/CTL
Опыт построения хранилищ данных на PosgteSQL и ClickHouse

Условия

Конкурентные условия труда (белая заработная плата, оклад, премии);
Официальное оформление по ТК РФ;
Социальный пакет + ДМС;
График работы – стандартный, но с гибким подходом;
Возможность обучения и сертификации за счет компании;
Корпоративная программа лояльности (льготное кредитование, скидки в компаниях-партнерах).

Scala разработчик