Tech Lead Data Engineer

Оплата не указана

Вакансия находится в архиве

Flocktory

Динамо

и еще 1 станция

г. Москва

Требуемый опыт работы

Более 6 лет

Тип занятости

Полная занятость

График работы

Полный день

Flocktory - аккредитованная динамично развивающаяся IT-компания, один из лидеров рынка Marketing Technologies

Год основания: 2012

Команда: 190+ человек

Продукты: SaaS-платформа для маркетинга (MarTech)

Ценность наших продуктов: помогаем E-Commerce на основе предиктивной аналитики делать коммуникацию с покупателями максимально персонализированной и благодаря этому увеличивать лояльность покупателей, конверсию и средний чек

BigData: Благодаря интеграции нашей платформы с сайтами крупнейших игроков рынка мы можем видеть больше 35% всех транзакций Рунета и данные о покупках и поведении более 100 миллионов человек

Клиенты: 300+ крупных E-Commerce/ритейлеров, банков, страховых компаний (Детский мир, М.Видео, АльфаБанк, Газпромбанк, S7, Билайн, МТС, Мегафон, L'Oreal и др.)

Оборот: 2.5 + млрд.рублей за 2023 (наша выручка стабильно растет на 40% от года к году последние 9 лет)

Мы ищем опытного инженера по работе с данными. В этой роли у тебя будет возможность принять участие в разработке и имплементации архитектуры платформы данных, организации процессов дизайн ревью. А также ты будешь оказывать большое влияние на процессы разработки в платформе. Мы предоставляем возможность работать с современным стеком технологий и опыт работы с Big Data (100+ TB).

Что нужно будет делать:

  • Участвовать в разработке и поддержке архитектуры данных и пайплайнов как пакетной, так и потоковой обработки совместно с архитектором;

  • разрабатывать пакетные и потоковые пайплайны по требованиям от продуктовых команд;

  • мониторить пайплайны и качество данных, включая Data Lineage;

  • разбирать инциденты (есть дежурства в рабочее время, дежурный следит за слак каналом с инцидентами).

Ты наш человек, если у тебя есть:
  • Опыт работы в роли инженера данных или инженера машинного обучения от 4 лет;

  • опыт построения дата платформы, включая хранилища данных, ETL / ELT пайплайнов и мониторинга;

  • опыт построения и работы с хранилищами данных;

  • опыт по выгрузке данных из внешних источников;

  • опыт работы с SQL и NoSQL;

  • опыт построения и организации Data Quality;

  • знание и ежедневное применение Scala Spark, желательно знание Python для работы с Airflow.

Наш стек:

  • Spark, Airflow

  • Scala, Python

  • Kafka

  • PostgreSQL, ClickHouse

  • git, CI-CD, Docker / Kubernetes

  • sbt / maven, ScalaTest / JUnit

Будет плюсом, если у тебя есть опыт с:

  • DBT, Kafka Connect

  • S3, Trino, Iceberg, Hudi, Hive

  • Amazon EMR, Yandex Dataproc

Нам нравится во Flocktory, потому что мы:

  • Работаем в окружении талантливых людей, которые вдохновляют и мотивируют расти;

  • создаем SaaS решения, рынок которых активно растет, особенно последние годы;

  • много экспериментируем и создаем продукты, у части которых нет аналогов в России;

  • до сих пор работаем в атмосфере стартапа, несмотря на то что нас уже больше 100 человек;

  • используем data-driven подход, опираемся в решениях на цифры и результаты тестирования гипотез;

  • решаем сложные, нетривиальные задачи, которые развивают и дают возможность расти;

  • пользуемся высоким уровнем свободы в выборе способов решения задач;

  • можем развиваться по любой траектории так, как нам интересно.

И самое главное:

  • Полностью “белая” заработная плата и все остальные выплаты;

  • возможность работать в гибридном формате или полностью удаленно, в т.ч. из другой страны (оформляем по ТК РФ и платим зарплату на рублевые счета);

  • возможность брать три дня дополнительно к отпуску каждые полгода для решения личных вопросов;

  • расширенная ДМС со стоматологией, онкозащитой, восстановлением после ковида, онлайн-поддержкой психолога, страховкой для путешественников;

  • скидки на обучение английскому от Skyeng;

  • годовой бюджет на внешнее обучение каждого сотрудника;

  • доступ к внутренней обучающей платформе с онлайн курсами по развитию hard и soft skills;

  • частичная компенсация покупки бизнес-литературы;

  • тренинги с внешними экспертами;

  • участие в конференциях, подготовка к выступлениям;

  • частичная компенсация занятий спортом;

  • онбординг с ментором;

  • поддержка buddy в течение первого месяца работы;

  • корпоративный ноутбук;

  • для тех, кто в Москве - современный комфортный офис в районе ст.м. Динамо (SOK, Рыбаков Тауэр);

  • скидки от партнеров (больше 300 интернет-магазинов);

  • большое количество онлайн/офлайн внерабочих активностей: корпоративы, Random coffee, FlockTalk, книжный клуб, покерный клуб, квизы.

Ключевые навыки

Spark framework
Airflow
Scala
Python
Apache kafka
Postgresql
Sql/mongodb/postgressql,clickhouse
Docker
Kubernetes
Apache maven
Scalatest
Junit

Адрес

Москва, Ленинградский проспект, 36с11

Контактная информация

Flocktory

Сайт: не указан

Почта: не указана

Вакансия опубликована 22.08.2024 в г. Москва.

Похожие вакансии

#

Senior

Не указана

Москва

Удаленная работа

Подробное описание

29 июля

#

Не указана

Москва

Полный день

Подробное описание

16 августа

#

Москва

Полный день

Подробное описание

13 августа