Teamlead (команда Data Engineering - Platform)

Привет! На связи SberMarket Tech!

Купер (ex СберМаркет) — это сервис доставки из магазинов и ресторанов. За 10 лет сервис вырос из food-tech стартапа в высокотехнологичную компанию.

Купер — это профессиональная команда и надёжная IT-инфраструктура, которая увеличилась в 77 раз с 2019 года. Купер объединяет свыше 1 300+ IT-специалистов. Мы создаем вдохновляющий продукт для миллионов клиентов.

В команде Data Engineering уже более 30 профессионалов

Мы создаем хранилища данных, а также инструменты для анализа и использования данных в ML. В связи с ростом компании и новыми задачами, мы ищем тимлида в группу разработки и развития транспортировки данных. Между собой мы называем команду "Research & development" или просто RnD. Команда занимается исследованием и внедрением новых технологий работы с данными, разрабатывает стандарты.

‍Чем предстоит делать:

• Управлять командой опытных инженеров из 8 человек;
• Выстраивать процессы команды и настраивать взаимодействие со смежными командами;
• Обучать и повышать квалификацию сотрудников;
• Развивать Data Lake;
• Масштабировать существующее CDC-решение на базе Debezium и Spark Streaming;
• Развивать практику использования Trino в компании;
• Участвовать в исследованиях и принимать решения по использованию новых инструментов для обработки данных в компании;
• Выдерживать SLO по ключевым процессам;
• Участвовать во внутренних и внешних митапах и рассказывать нашим клиентам и партнером о том, чем живет и дышит DWH СберМаркет.
  
  ⭐️Мы ожидаем от кандидата:
• Опыт управления командой от 5 дата инженеров от 1 года;
• Опыт выстраивания процессов с 0, подкрепленный метриками;
• Понимание принципов организации хранилищ данных;
• Уверенное знание SQL, умение строить сложные запросы и оптимизировать производительность;
• Уверенное знание одного из языков программирования: python, java, scala;
• Опыт работы с Apache Airflow;
  
  Будет плюсом, если ты
• Работал с Iceberg, S3, Trino, Debezium, Kafka Connect, Clickhouse, Greenplum;
• Разрабатывал ETL процессы с помощью Spark.
  
  Что интересного есть у нас?
• ДМС с первого месяца работы в компании;
• дополнительные опции на выбор — спорт, английский, промокоды на заказ продуктов или билеты в отпуск;
• удаленная работа. В Москве есть большой и красивый офис, поэтому если ты из этого города или будешь проездом — welcome;
• техника для работы;
• интеллектуальное и физическое развитие (электронная библиотека, книжный клуб, футбол, мастер-классы в офисе);
• knowledge base с курсами, книгами и записями конференций + выделенный бюджет на внешнее индивидуальное обучение.