Data Engineer

Оплата не указана

Вакансия находится в архиве

iFuture

Беговая

и еще 2 станции

г. Санкт-Петербург

Требуемый опыт работы

От 3 до 6 лет

Тип занятости

Полная занятость

График работы

Полный день

Привет!

iFuture – это продуктовая IT-компания, которая разрабатывает собственный международный продукт с многомиллионной аудиторией в сфере спортивной аналитики и развлечений уже на протяжении 27 лет.

Мы находимся в поиске опытного инженера данных для работы с большими объемами данных и сложными системами обработки информации.

Основные требования и обязанности:

1. Глубокое знание и опыт работы с ClickHouse
Вы будете активно использовать эту СУБД для обработки и анализа больших объемов данных

2. Уверенное владение Python или Java для разработки и поддержки масштабируемых конвейеров данных

3. Опыт работы с ETL-процессами и инструментами, включая проектирование, разработку и оптимизацию потоков данных

4. Практический опыт использования Apache Airflow для планирования и управления рабочими процессами данных (если python)

5. Знание и опыт работы с Apache Beam для определения и выполнения как пакетной, так и потоковой обработки данных (если java)

6. Опыт работы с хранилищами данных (DWH) и технологиями OLAP

7. Способность проектировать и управлять структурами данных, включая трансформацию данных, модели данных, схемы и метаданные

8. Опыт работы со Apache Spark и Kafka

Будет плюсом:

  • Опыт работы с Hadoop и YTSaurus
  • Умение оптимизировать процессы обработки данных для повышения производительности
  • Навыки совместной работы с другими командами и участие в agile-процессах для своевременной и эффективной реализации проектов

Как инженер данных, вы будете отвечать за создание и поддержку архитектуры, используемой для хранения и обработки данных. Ваша роль будет ключевой в обеспечении эффективной работы с данными в нашей организации

Мы предлагаем:

  • Работу над продуктом, известным во всем мире;
  • Конкурентоспособную заработную плату;
  • Оформление по ТК РФ с первого рабочего дня в аккредитованную IT-компанию;
  • Корпоративный ДМС + Стоматология;
  • Компенсацию занятий любым спортом/фитнесом, корпоративные скидки в сеть фитнес клубов;
  • Оплату профильного обучения (курсы, конференции, вебинары, учебники и пр.);
  • Возможность быть замеченным, признанным и оцененным по достоинству усилий и вклада в развитие продукта;
  • Изучение английского языка с преподавателем в офисе или онлайн;
  • Гибкое начало рабочего дня (присутственные часы с 11 до 17, 5-дневная рабочая неделя);
  • Удобный формат работы – удалённый формат/гибрид/офисы компании в г. Санкт-Петерубрг, Москва, Лимассол.

  • Интересную и насыщенную корпоративную жизнь.

Ключевые навыки

Sql/mongodb/postgressql,clickhouse
Python
Java
Cpp-netlib
Apache airflow
Dwh
Olap (online analytical processing)
Apache spark
Apache kafka
Apache beam

Адрес

Санкт-Петербург, Липовая аллея

Контактная информация

iFuture

Вакансия опубликована 21.10.2024 в г. Санкт-Петербург.

Похожие вакансии

#

Санкт-Петербург

Удаленная работа

Подробное описание

21 октября

#

Санкт-Петербург

Пролетарская

Полный день

Подробное описание

12 августа

#

Не указана

Санкт-Петербург

Полный день

Подробное описание

21 октября