В TechInvest Consulting мы хотим изменить подход к принятию решений в FMCG бизнесе. Сейчас мы разрабатываем инновационный продукт на стыке AI технологий, дизайна и бизнес аналитики, для максимально эффективного управления ассортиментом компании на основе анализа больших данных и построения предиктивных моделей.

Мы даем свободу в выборе рабочего времени, места, так как сами это ценим.

Сейчас мы ищем Дата-инженера.

Внимание: это проектная команда!

Чем предстоит заниматься:

Построение архитектуры БД
Написание ETL потоков для построения витрин
Описание потоков в документации
Описание SQL запросов к витринам для бэкенда

а также

- Самостоятельно анализировать требования к потокам данных, разрабатывать и поддерживать системы сбора, хранения и обработки данных

- Улучшать процессы работы с данными и обеспечивать их качество

Стек:
- Spark
- Scala
- Airflow
- Hadoop

Наши пожелания

Знание передовых принципов построения хранилищ данных.
Опыт работы с Hadoop.
Отличное знание SQL.
Опыт работы с Python на уровне написания API, небольших скриптов и сервисов.
Знание Git.
Опыт работы с ETL оркестраторами (airflow)

Что мы предлагаем:

Аккредитованная компания
У нас дружелюбная атмосфера и команда профессионалов
Возможность работать из любой точки мира
Возможность создать действительно интересный проект
Гибкий график работы
Реализация классного и полезного проекта, которого еще нет на российском рынке

Data Engineer