Инженер-данных (Data Engineer)

О Technology:

Команда Technology - одно из самых передовых, направлений "Технологий Доверия". Мы реализуем самые разные проекты в области технологического консалтинга, начиная от преобразования ИТ-функции предприятия, кибербезопасности и до проектирования архитектур и экосистем. Именно мы работаем как с глобальными организациями, так и с самыми перспективными стартапами. Мы тесно взаимодействуем со всеми другими направлениями "Технологий Доверия" и создаем общие команды для решения задач наших клиентов.

Текущие задачи / проекты:

• Внедрение и разработка DWH (data warehouse - корпоративного хранилища данных) на базе open source продуктов;
• Внедрение и разработка систем обработки информации различного назначения;

Обязанности:

• Участие в анализе и уточнении бизнес-требований;
• Участие в проектировании и разработке архитектуры решений;
• Проектирование и реализация ELT/ETL-процессов с помощью Apache NiFi и/или Airflow;
• Оптимизация производительности запросов;
• Сборка витрин данных, построение инфо-кубов
• Формирование технической документации

Требования:

• Более 3 лет опыта работы в роли инженера данных;
• Участие в 1 проекте внедрения/развития DWH (КХД);

• Практический опыт работы с Clickhouse;
• Уверенное владение SQL и Python;
• Понимание механизма работы BI-инструментов и опыт работы с инструментами визуализации данных;
• Опыт работы с Apache Airflow или Nifi;

• Понимание основ Linux;
• Английский язык: чтение документации, способность поддержать несложный диалог (A2-B1).

Как плюс:

• Опыт работы с S3-хранилищами;
• Опыт работы с системами обмена сообщениями (например, Apache Kafka);
• Опыт работы с REST API;
• Опыт миграции данных в/из систем класса ERP (1С, SAP, Oracle);

Наш стэк:

• Docker;
• Apache NiFi;
• Apache Airflow;
• Prometheus, Grafana, Zabbix;
• S3;
• PostgreSQL, ClickHouse;
• Metabase, Visiology, Форсайт, Insight BI;
• GitLab.

Условия:

• Конкурентную заработную плату;
• Свободу выбора в проектах, а также много передовых проектов в разных индустриях\сферах со своей отдельной проблематикой;
• Прозрачную систему карьерного роста и профессионального прогресса;
• Возможность удаленной работы, гибкое начало\завершение рабочего дня;
• Широкий социальный пакет, включающий в том числе ДМС, а также целый комплекс мероприятий well-being (онлайн курсы йоги, пилатеса, спортивные курсы и т.д.);
• Открытые возможности по внутренним проектным перемещениям;
• Отличные внутренние программы обучения, подкасты, материалы по анализу данных, роботизации, lean management, design thinking и множеству других различных дисциплин на внутреннем обучающем портале;
• Поддержка при получении профессиональных сертификатов, включая сертификации Академии "Технологий Доверия";