Инженер по обработке данных Hadoop/Java developer (Data Platform)

Оплата не указана

Вакансия находится в архиве

ООО HeadHunter:: IT

г. Москва

Требуемый опыт работы

От 1 года до 3 лет

Тип занятости

Полная занятость

График работы

Полный день

Мы создаём высоконагруженный сервисный сайт, который занимает 3 место в мире по рейтингу SimilarWeb среди сайтов по поиску работы. Ежедневно к нам приходят около полутора миллионов пользователей, смотрят более 100 миллионов страниц (до 10000 в секунду), и делают около 1 миллиона откликов на вакансии. Мы хотим знать о всех действиях пользователя и понимать их поведение. Поэтому внедряем различные инструменты для сбора и анализа данных, и сейчас ищем человека, который будет развивать процессы обработки данных компании.

Чем предстоит заниматься:

  • Реализация процессов обработки данных на технологическом стеке Hadoop;
  • Реализация процессов тестирования данных на технологическом стеке Hadoop;
  • Реализация процессов обмена данными с внутренними аналитическими системами;
  • Анализ задач от аналитиков компании с целью принятия архитектурных решений по хранению и обработке данных;
  • Разработка и реализация архитектурных решений для целей хранения и обработки данных;
  • Выстраивать и развивать процессы обработки данных в компании при помощи Apache Flink, Spark, Kafka. У нас есть как потоковая, так и пакетная обработка данных;
  • Помогать другим разработчикам в их ежедневной работе с хранилищем.
Кандидат мечты:
  • Уверенное знание Java;

  • Опыт работы с Apache Flink, Kafka, Spark, Hadoop;

  • Понимание и применение на практике ООП, SOLID, паттернов проектирования.

Будет плюсом:

  • Опыт работы с Hive/Trino, Postgres, Airflow;
  • Знакомство с ОС семейства Linux;
  • Знание Python;
  • Чувство юмора :)
Что мы предлагаем:
  • Возможность удаленной работы;

  • Корпоративное ДМС (со стоматологией) с первого месяца работы; страхование жизни;

  • Обучение за счет компании, участие в специализированных конференциях;

  • Работу в ИТ-компании с аккредитацией в Минцифры;

  • Корпоративный сервис с круглосуточной поддержкой юриста, психолога и финансового консультанта;

  • Промокоды и бонусы от партнеров.

Ключевые навыки

Apache flink
Apache kafka
Spark framework
Apache hadoop
Java
Python
Linux
Airflow

Адрес

Москва улица Годовикова 9с10

Контактная информация

ООО HeadHunter:: IT

Сайт: не указан

Почта: не указана

Вакансия опубликована 14.02.2024 в г. Москва.

Похожие вакансии

#

от 180 000 до 180 000 ₽

Санкт-Петербург

Ладожская

Полный день

Подробное описание

12 апреля

#

Санкт-Петербург

Ладожская

Полный день

Подробное описание

8 августа

#

Москва

Бутырская

Полный день

Подробное описание

28 мая