Направление занимается разработкой платформы хранилища данных и средств визуализации. В направлении более 100 профессионалов, каждый из которых занимается своей задачей: техническим анализом процессов, данных и интеграций; транспортом данных; построением хранилища; развитием средств визуализации данных и поддержкой хранилища. Мы собираем команду, которая предана своему делу, любит большие интересные задачи и готова пройти уникальный путь построение одного из самых больших хранилищ данных в России.

Команда создает решение для автоматической доставки данных и построения горячей аналитики. Задача сделать так, что бы внутренние пользователи смогли сами найти исходные данные, доставить их до нужной системы и проанализировать. Мы в начале пути и нам предстоит еще много интересных и сложных задач.

Наш стек:

Java
Vertica, ClickHouse, Hadoop (hadoop3, hdfs, yarn, hive) и др.
Gitlab CI/CD, Kubernetes
Kafka, Prometheus, Grafana
Gitlab, GIT

Вам предстоит:

Работа в команде над созданием новых и развитием существующих инструментов на базе Hadoop (hadoop3, hdfs, yarn, hive).
Внедрение/рефакторинг e2e тестирования сервисов.
Участие в проектировании архитектуры разрабатываемых решений.
Участие в выборе используемых технологий и компонентов.
Внедрение и сопровождение технических решений.
Документирование разрабатываемых решений.
Проведение code review.

Мы ожидаем:

Уверенное владение Java.
Опыт работы с Hadoop (hdfs, yarn, hive).
Опыт разработки многопоточных приложений.
Опыт работы с СУБД (Postgre SQL/MS SQL).
Опыт работы с аналитическими БД (Vertica/Greenplum/BigQuery/Redshift/Synapse).
Опыт работы с Kubernetes, Kafka, git.
Опыт работы с KV-хранилищами.

Будет плюсом:

Опыт работы с Prometheus, Grafana.
Опыт работы со Scala.
Опыт работы с Airflow (Celery Executor, k8s).

Мы предлагаем:

Динамичный и быстроразвивающийся бизнес, ресурсы, возможность вместе сделать лучший продукт на рынке e-commerce.
Свободу действий в принятии решений.
Достойный уровень заработной платы.
Профессиональную команду, которой мы гордимся.
Возможность развиваться вместе с нашим бизнесом.

Разработчик Java, Хранение и обработка данных