Data Engineer (middle)

до 220 000 ₽ до вычета налогов

Требуемый опыт работы

От 3 до 6 лет

Тип занятости

Полная занятость

График работы

Удаленная работа

Компетенции

Middle

Цифровые Привычки – аккредитованная IT-компания, резидент Сколково, топ-5 подрядчиков Сбера. Мы предоставляем услуги IT-консалтинга, заказной разработки, аутсорсинга IT-процессов и развиваем собственные продукты и проекты партнеров.
Наша команда — это сплоченный коллектив высококвалифицированных профессионалов, способных эффективно решать самые сложные задачи. Нас более 250 человек, распределенных по разным проектам и городам.
Люди — самый ценный актив.
Наша команда экспертов объединена общими идеями, ценностями и миссией. Мы делаем свою работу лучше каждый день благодаря общим принципам, которые нами движут.
Мы заботимся о благополучии специалистов: создаем комфортные условия труда, ставим амбициозные задачи и даем возможность поменять проект, если он по каким-то причинам перестал устраивать.
Количество наших проектов растет, как растет и наша команда. Сейчас мы в поиске Data Engineer на проект Сбера.
О проекте: Занимаются созданием АС (автоматизированной системы) по анализу и мониторингу контрактов юридических лиц с микросервисной архитектурой.

Задача - создание рабочего места для автоматизации работы сотрудников кредитного анализа и мониторинга сотрудников мониторинга и поставка алгоритмов на больших данных, интегрируясь с множеством внутренних и внешних источников и автоматизированными системами корпоративных клиентов.

Работают по Scrum с активным привлечением бизнес-аналитиков (Customer Journey Expert) и пользователей из бизнес подразделений.

В команде представлены компетенции: разработчики backend и frontend, системные аналитики, QA инженеры.

Ищем:

Data Engineer, уровень Middle и выше, в команду разработчиков для нового проекта. Основная задача – работа по расширению имеющейся витрины данных (ВД) в рамках текущей ИТ-архитектуры, создание новой ВД. Многозадачность, работа в команде – основные черты, которыми должен обладать кандидат помимо профессиональных знаний и опыта.

Обязанности:

  • Проектирование и разработка аналитических витрин данных для целей отчетности и исследований на стеке Hadoop + Spark + Scala;

  • Мониторинг и оптимизация процессов сборки витрин;

  • Разработка и поддержка сопроводительной документации и спецификаций данных, развитие и поддержка базы знаний по вопросам работы с данными;

  • Предоставление экспертной поддержки внутренним потребителям (data analysts, data scientists) по вопросам, связанным с использованием данных;

  • Анализ исходных данных в различных системах и форматах для решения бизнес-задач (оценка структуры, качества, полноты и применимости данных);

  • Контроль качества загружаемых данных.

Требования:

  • Опыт работы в качестве Data Engineer / Data Analyst / ETL Developer от 2 лет;

  • Опыт работы с одной из реляционных СУБД - PostgreSQL (текущий техстек)/Oracle/mySQL/MS SQL Server;

  • Знание SQL на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация производительности);

  • Знание архитектуры МРР СУБД (Hadoop, Greenplum), опыт практической работы c MPP СУБД;

  • Опыт промышленной разработки на стеке Scala/Python;

  • Опыт работы с большими объемами данных с использованием стека технологий Big Data (Hadoop, Spark, GreenPlum);

  • Знание основных понятий и концепций из области Data Warehouse;

  • Практический опыт разработки витрин данных с использованием инструментов Apache Spark, Kafka, Hadoop (Hive / Oozie).

Будет плюсом:

  • Знание методологии Agile и опыт работы в Scrum-команде будет плюсом;

  • Опыт работы с чужим кодом;

  • Знание корпоративного банковского бизнеса является преимуществом.

Условия:

  • Достойная заработная плата
  • Трудоустройство по ТК, ИП, ГПХ, СЗ.
  • Формат работы удаленный/гибридный/офис - на выбор.
  • Реальный рост внутри компании, регулярный пересмотр зарплаты по результатам работы.
  • Обучение в образовательном центре HeadBridge на базе компании.
  • Возможность изучения английского языка.
  • Доход обсуждаем с каждым кандидатом индивидуально (все зависит от вашего уровня знаний)
  • ДМС.

Ключевые навыки

Cpp-netlib
Apache hadoop
Greenplum
Oracle
Scala
Python
Spark framework
Apache kafka

Контактная информация

Цифровые привычки

Сайт: dhabits.ru

Почта: hello@dhabits.ru

Вакансия опубликована 26.10.2024 в г. Москва.

Похожие вакансии

#

Москва

Китай-город

Удаленная работа

Подробное описание

9 июля

#

Не указана

Москва

Полный день

Подробное описание

15 августа

#

до 80 000 ₽

Москва

Полный день

Подробное описание

21 октября