Java/Spark разработчик

Java разработчик со знанием Spark

Вакансия открыта в компании ООО "Тера Интегро", входящей в холдинг Аренадата (АДС-Холдинг).

Teradata, по сути, придумала и реализовала программно-аппаратные решения для аналитической обработки больших объёмов данных, работающих на группе серверов, до того как появились темы типа Hadoop, BigData и т.п. Команда TI, таким образом, изначально состояла из специалистов, которые накопили много опыта построения решений для аналитических систем – BigData, DataLake, Хранилища данных.

После ухода западных вендоров с продуктами для анализа данных (Teradata, Oracle Exadata, SAP Hana, Vertica и т.п.) критичным стал переход на доступные альтернативные open source продукты - включая Greenplum, Clickhouse и Hadoop. Команды TI также переключили фокус на использование open source продуктов, адаптируя свой опыта использования MPP Teradata на эти технологии.

Основные направления деятельности компании — разработка, внедрение и сопровождение аналитических хранилищ данных на базе технологий open source.

Что нужно делать:

• 3-ая линия поддержки разработчиков по используемому на проекте фреймворке;
• Заниматься настройкой конфигурационных файлов, связанных с работой DevOps трубы для сборки и раскатки клиентских проектов;
• Структурировать код data-продукта для работы с нашим фреймворком;
• Проводить расследования падений/ошибок запуска data-продуктов на различных стендах;
• Консультировать коллег по имеющимся ошибкам data-продуктов и решение сложностей конфигурирования maven / sbt для сборки проектов, в т.ч. в части проблем совместимости подключаемых библиотек и настройки classpath, настройкой параметров Spark для корректной / оптимальной работы джобов;
• Проводить анализ логов и канала kafka, заведение заявок на настройку kafka.

Мы ждём, что вы:

• Имеете опыт разработки на Java от 2 лет;
• Имете разработки на Spark от 2 лет;
• Обладаете умением анализировать логи и локализовать причину сбоя;
• Обладаете умением внятно формулировать найденные проблемы, документировать причины возникновения и сценарии воспроизведения проблем;
• Внимательны и готовы работать с задачами на сопровождение от коллег-разработчиков из других команд;
• Обладаете техническим образование (математика/физика/информационные технологии).

Условия:

— оформление по ТК РФ в ИТ-аккредитованную компанию;

— Выстроенная система работы с персоналом: индивидуальный план развития, выделенный бюджет на обучение у сторонних подрядчиков, регулярные 1:1 с руководителем;

— ДМС, включая стоматологию, страхование жизни и здоровья в поездках за рубеж. А еще можно застраховать родственников с корпоративной скидкой;

— Дополнительный оплачиваемый отпуск;

— Работа на проектах с крупнейшими Российскими заказчиками - банки, ритейл, телекомы;

— Гибрид (преимущественно удаленно, но иногда будет необходимость выезжать к заказчику для очных встреч)