DataOffice - это драйвер DataDriven культуры в Ростелекоме, один из лидеров отрасли управления данными в России. DataOffice объединяет 300 профессионалов в области ИТ-технологий

Мы скомпилировали свой дистрибутив на базе экосистемы Hadoop, активно пользуемся им внутри и снаружи на Петабайтных объемах данныx.
У нас есть код на Ansible, позволяющий установливать, запускать, керберизовать кластер Hadoop и компоненты его экосистемы (Spark, Hive, etc), а также управлять ими, продолжаем расширять его функционал и в связи с этим хотим усилить команду разработки.
Данный код используется внутренними и внешними клиентами для управления кластерами.

У нас большая команда хадуповодов, мы выступаем на профильных конференциях, пишем статьи и будем очень рады если ты присоединишься к нам Если нет опыта в больших данных, но есть желание - обучим
Чем предстоит заниматься:

Автоматизировать все что неавтоматизировано для управления кластерами, добавлять новые компоненты.
Взаимодействовать с командой поддержки и тестирования, участвовать в развитии продукта.

Чем еще можно позаниматься:

Доработка opensource исходников компонент экосистемы Hadoop и самого Hadoop (90% Java/Scala, 10% Python&C)
Сборка пакетов дистрибутива
Тестирование и доработка кода или пакетов на новых операционных системах
Написание jenkins задач
Доработка Docker-образов
Работа с безопасностью, исправление уязвимостей

Ждем от кандидата:

Опыт написание ролей на ansible
Умение писать на bash
Знание git
Опыт администрирования Linux

Желательно, но необязательно:

Опыт работы с экосистемой hadoop (Spark, Hive, HDFS)
Docker, docker-compose

Будут супер:

Опыт с NiFi, Kafka, Airflow и другими компонентами экосистемы
Знание Python, Java
Навыки в сфере ИБ
Умение настраивать компоненты Hadoop-экосистемы под высокие нагрузки
Понимание принципов работы JVM
Понимание основные принципы работы сетей
Понимание принципы работы Kerberos и PKI

Мы предлагаем:

Офисы во всех крупных городах, в том числе в Москве в БЦ Академик, победившем в номинации лучший проект «Бизнес-центр класса А. Москва»
Гибкий график
Возможна полная или частичная удаленная работа
Оформление по ТК
Белая и конкурентоспособная зарплата
Квартальные и годовые бонусы
ДМС, компенсация обучения и спорта
Корпоративное обучение: внутренние митапы, участие в конференциях, доступ к корпоративным библиотекам технической и бизнес литературы
И прочие плюсы аккредитованной ИТ-компании

Hadoop Administrator/Data Engineer