Инженер по обработке данных Hadoop/Java developer (Data Platform)

Мы создаём высоконагруженный сервисный сайт, который занимает 3 место в мире по рейтингу SimilarWeb среди сайтов по поиску работы. Ежедневно к нам приходят около полутора миллионов пользователей, смотрят более 100 миллионов страниц (до 10000 в секунду), и делают около 1 миллиона откликов на вакансии. Мы хотим знать о всех действиях пользователя и понимать их поведение. Поэтому внедряем различные инструменты для сбора и анализа данных, и сейчас ищем человека, который будет развивать процессы обработки данных компании.

Чем предстоит заниматься:

• Реализация процессов обработки данных на технологическом стеке Hadoop;
• Реализация процессов тестирования данных на технологическом стеке Hadoop;
• Реализация процессов обмена данными с внутренними аналитическими системами;
• Анализ задач от аналитиков компании с целью принятия архитектурных решений по хранению и обработке данных;
• Разработка и реализация архитектурных решений для целей хранения и обработки данных;
• Выстраивать и развивать процессы обработки данных в компании при помощи Apache Flink, Spark, Kafka. У нас есть как потоковая, так и пакетная обработка данных;
• Помогать другим разработчикам в их ежедневной работе с хранилищем.

• Уверенное знание Java;

• Опыт работы с Apache Flink, Kafka, Spark, Hadoop;

• Понимание и применение на практике ООП, SOLID, паттернов проектирования.

Будет плюсом:

• Опыт работы с Hive/Trino, Postgres, Airflow;
• Знакомство с ОС семейства Linux;
• Знание Python;
• Чувство юмора :)

• Возможность удаленной работы;

• Корпоративное ДМС (со стоматологией) с первого месяца работы; страхование жизни;

• Обучение за счет компании, участие в специализированных конференциях;

• Работу в ИТ-компании с аккредитацией в Минцифры;

• Корпоративный сервис с круглосуточной поддержкой юриста, психолога и финансового консультанта;

• Промокоды и бонусы от партнеров.