Разработчик Java, Хранение и обработка данных

Направление занимается разработкой платформы хранилища данных и средств визуализации. В направлении более 100 профессионалов, каждый из которых занимается своей задачей: техническим анализом процессов, данных и интеграций; транспортом данных; построением хранилища; развитием средств визуализации данных и поддержкой хранилища. Мы собираем команду, которая предана своему делу, любит большие интересные задачи и готова пройти уникальный путь построение одного из самых больших хранилищ данных в России.

Команда создает решение для автоматической доставки данных и построения горячей аналитики. Задача сделать так, что бы внутренние пользователи смогли сами найти исходные данные, доставить их до нужной системы и проанализировать. Мы в начале пути и нам предстоит еще много интересных и сложных задач.

Наш стек:

• Java

• Vertica, ClickHouse, Hadoop (hadoop3, hdfs, yarn, hive) и др.

• Gitlab CI/CD, Kubernetes

• Kafka, Prometheus, Grafana

• Gitlab, GIT

Вам предстоит:

• Работа в команде над созданием новых и развитием существующих инструментов на базе Hadoop (hadoop3, hdfs, yarn, hive).

• Внедрение/рефакторинг e2e тестирования сервисов.

• Участие в проектировании архитектуры разрабатываемых решений.

• Участие в выборе используемых технологий и компонентов.

• Внедрение и сопровождение технических решений.

• Документирование разрабатываемых решений.

• Проведение code review.

Мы ожидаем:

• Уверенное владение Java.

• Опыт работы с Hadoop (hdfs, yarn, hive).

• Опыт разработки многопоточных приложений.

• Опыт работы с СУБД (Postgre SQL/MS SQL).

• Опыт работы с аналитическими БД (Vertica/Greenplum/BigQuery/Redshift/Synapse).

• Опыт работы с Kubernetes, Kafka, git.

• Опыт работы с KV-хранилищами.

Будет плюсом:

• Опыт работы с Prometheus, Grafana.

• Опыт работы со Scala.

• Опыт работы с Airflow (Celery Executor, k8s).

Мы предлагаем:

• Динамичный и быстроразвивающийся бизнес, ресурсы, возможность вместе сделать лучший продукт на рынке e-commerce.

• Свободу действий в принятии решений.

• Достойный уровень заработной платы.

• Профессиональную команду, которой мы гордимся.

• Возможность развиваться вместе с нашим бизнесом.