Инженер сопровождения направления Big Data

В SberData мы создаем централизованное хранилище данных всего Сбера. Это более 800 источников данных и 100+ Пб информации, заказ и получение данных за 15 минут и современный технологический стек работы с данными, включая собственные сборки СУБД на базе Hadoop и Greenplum.

Масштаб задач, объемы данных, сложности финансовых процессов — мы все время на передовой современных технологий, а где-то и создаем их. Будем рады видеть в нашей команде системных разработчиков ClickHouse, DevOps-инженеров, системных администраторов, специалистов по разработке Scala/Java, разработчиков Python.

Задачи проекта

• Организация и выполнение загрузок инкрементов данных из АС-источников
• Организация и выполнение архивных перезагрузок данных
• Анализ и разрешение инцидентов и проблем в части загрузки данных
• Анализ и оптимизация использования ресурсов в части загрузки данных

Обязанности

• Сопровождение хранилищ данных на платформе Hadoop
• Организация и мониторинг загрузки данных из систем-источников
• Планирование и проведение внедрений
• Анализ и разбор инцидентов

Требования

• Опыт работы в сопровождении
• Базовые знания Linux и работы в консоли
• Знание и опыт работы с SQL
• Высшее техническое образование
• Будет плюсом опыт работы с Hadoop: HDFS, Hive, Spark, администрирования RHEL, знание ITIL/ITSM, одного из языков программирования (Java, Bash, Python)

Условия

• Стабильный оклад и социальная поддержка сотрудников
• Расширенный ДМС с первого дня работы для сотрудников и льготная медицинская страховка для близких
• Бесплатная подписка СберПрайм +, скидки на продукты компаний партнеров: СберМаркет, Самокат, Еаптека и других
• Корпоративная пенсионная программа
• Обучение за счет компании
• Реферальная программа для сотрудников: можно пригласить в команду знакомых профессионалов и получить денежное вознаграждение