Spark разработчик

Наш проект, это система принятия решений, которая позволяет оценить возможность выдачи клиенту кредитного/ипотечного продукта.
Стек: Java 11 / 17, Python, SQL. Базы данных: Oracle, PostgreSQL, GreenPlum.
Эко-система Hadoop: HDFS, Apache AirFlow, Spark, Kafka, Hive.

Чем предлагаем заниматься:

• Занимается развитием системы принятия решений
• Принимать участие в решение сложных задач, задач по оптимизации
• Участвовать в системном проектирование, принимать участие в исследовательской деятельности

• Глубокие знания и опыт использования Apache Airflow для создания и управления рабочими процессами и потоками данных

• Знание Python для создания пользовательских задач и скриптов в Apache Airflow

• Опыт работы с базами данных, предпочтительно PostgreSQL, для хранения метаданных и результатов обработки данных

• Понимание принципов микросервисной архитектуры и опыт ее применения

• Знание практик SOLID/GRASP или иных подходов к чистому коду

• Опыт с работы с Kafka

• Глубокие знания и опыт использования Apache Spark для обработки и анализа больших объемов данных

• Опыт работы с распределенными системами и параллельным программированием

• Умение оптимизировать производительность и работу приложений на основе Apache Spark
  
  Будет плюсом:

• Cloudera Spark CCA или CCP

• Опыт оптимизации запросов к Postgres, Oracle

• Понимание как устроен Kubernetes

• Опыт использования Spark без HDFS

• Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования + квартальная премия
• Полную удалёнку, а также уютный ИТ-хаб в Москве, Санкт-Петербурге, Екатеринбурге и сезонный коворкинг в Сочи
• Сложные и интересные задачи, современный стек технологий
• Заботу о вашем здоровье: программа ДМС с первых дней работы, куда входит стоматология, обслуживание в лучших клиниках города, страхование и компенсация 10-ти дней больничного
• Возможность вертикального и горизонтального карьерного роста: регулярно проходят тренинги, вебинары, митапы и демо-дни
• Оплату посещения профильных конференций и курсов, помогаем с подготовкой к публичным выступлениям и написанием статей на Хабр
• Доступ к бесплатным корпоративным библиотекам Alpina Digital, МИФ и бизнес-изданий
• Предложения от Банка только для сотрудников: собственные спортзалы (Москва, Санкт-Петербург, Екатеринбург), а также скидки на услуги туристических агентств, продукты питания, в рестораны, бары, магазины
• Льготные условия на банковские продукты
• Персональные предложения от партнеров Альфа-Банка