Data - инженер

Обязанности:

• Поддержка работоспособности и дальнейшее развитие платформы данных
• Интеграция ХД с различными источниками (FTP, API, сайты) с помощью Python
• Преобразование данных из различных форматов (xml, json) к табличному виду с помощью Python
• Разработка витрин данных с использованием SQL, Python, PySpark
• Разработка и доработка batch и real-time процессов загрузки данных в различные слои ХД в Hive, Vertica, PostgreSQL, ClickHouse, DB2
• Развитие системы мониторинга качества данных
• Совершенствование и разработка новых внутренних процессов команды
• Декомпозиция и оценка трудозатрат по своим задачам
• Code-review
• Поддержка в актуальном состоянии базы знаний и технической документации ХД

Требования:

• Законченное высшее образование
• Понимание теории и практики построения Хранилищ Данных на уровне data-инженера
• Уверенное владение SQL, опыт написания сложных запросов с подзапросами, оконными функциями и регулярными выражениями, навыки оптимизации запросов
• Уверенные навыки программирования, умение читать и понимать код на Python
• Понимание принципов работы Git-систем
• Понимание принципов работы систем оркестрации
• Знание основных команд Linux на уровне пользователя
• Знание английского языка на уровне чтения технической документации
• Готовность разрабатывать и поддерживать в актуальном состоянии техническую документацию
• Умение работать в команде и готовность помогать коллегам
• Заинтересованность в личном развитии и развитии города

График работы:

• График 5/2

Преимущества работы в метро:

• Трудоустройство и работа в соответствии с ТК РФ

• Бесплатный проезд в столичном метро

• Бесплатный проезд по железным дорогам в пригородном сообщении от места жительства до места работы и обратно в пределах Московской области

• Льготы на отдых в оздоровительном комплексе метрополитена

• Детский оздоровительный лагерь и детский клуб

• Финансовые условия обсуждаем индивидуально в зависимости от опыта кандидата