Data Engineer

Оплата не указана

Вакансия находится в архиве

BI Consult

г. Санкт-Петербург

Требуемый опыт работы

От 3 до 6 лет

Тип занятости

Полная занятость

График работы

Полный день

«BI Consult» является аккредитованной IT-компанией, уже 15 лет специализируется на интеграции систем BI и DWH. Сейчас, в связи с активным развитием, ищем к себе в команду Data engineer.

Обязанности:

  • Разработка развитие и сопровождение хранилищ данных;
  • Проектирование и разработка пайплайнов (ETL процессов);
  • Написание функций и хранимых процедур для преобразования и агрегации данных;
  • Создание витрин;
  • Рефакторинг и оптимизация;
  • Разработка сопроводительной документации;
  • Передача знаний коллегам по отделу;
  • Совместная работа с Team Lead в вопросах принятия проектных решений.

Требования:

  • Понимание концепции построения хранилищ данных (DWH);
  • Опыт разработки пайплайнов в Airflow, NiFi;
  • Уверенные знания Python, SQL, Linux;
  • Опыт написания Cron-ов;
  • Опыт работы с высоконагруженными СУБД (MS SQL, Greenplum, PostgreSQL);
  • Понимание принципов хранения данных в SQL, секционирования, сегментирования, использование индексов.

Будет преимуществом:

  • Опыт управления качеством данных и управления данными (Data Governance);
  • Опыт работы с колоночными БД (Vertica, Clickhouse, GreenPlum /Arenadata).

Условия:

  • Официальное оформление по ТК;
  • Интересные, сложные задачи;
  • Профессиональный и горизонтальный коллектив;
  • Минимум бюрократии;
  • Возможность влиять на процессы;
  • Комфортный офис в 7 минутах ходьбы от ст.м. "Василеостровская" или "Спортивная". Настольный теннис, массажное кресло, тренажеры, кухня;
  • ДМС, корпоративный спорт (йога в офисе, кроссфит, АРБ);
  • Множество мероприятий и внерабочих активностей.

Вся команда работает из офиса, начало рабочего дня с 8:00 до 11:00.

Ключевые навыки

Sqlite
Postgresql
Cpp-netlib
Version control/git
Airflow
Sql/mongodb/postgressql,clickhouse
Dwh
Greenplum
Apache nifi
Python
Ms sql

Адрес

Санкт-Петербург, 6-я линия Васильевского острова, 63

Контактная информация

BI Consult

Вакансия опубликована 21.10.2024 в г. Санкт-Петербург.

Похожие вакансии

#

Не указана

Санкт-Петербург

Полный день

Подробное описание

8 августа

#

Санкт-Петербург

Московская

Полный день

Подробное описание

30 июня

#

Не указана

Санкт-Петербург

Звёздная

Полный день

Подробное описание

23 октября