data engineer

Сбербанк - Технологии

ML OPS

С 01.12.2021 по настоящее время (3 года 3 месяца)

Исследование и поиск промышленных источников для создания признаков и целевой переменной для ML-моделей. Воссоздание необходимых источников на промышленных данных. Разработка витрин с признаками и целевыми переменными для ML-моделей. Подготовка, тестирование и сборка прототипов, с помощью Jenkins, для внедрения ML-моделей в промышленный контур и их оркестрация с помощью oozie. Мониторинг и поддержка витрин и ML-моделей в промышленном контуре. Разработка библиотек и инструментов для упрощения жизни data scientist’ов. Рефакторинг и оптимизация кода

Сбербанк - Технологии

ML OPS

С 01.12.2021 по настоящее время (3 года 3 месяца)

Исследование и поиск промышленных источников для создания признаков и целевой переменной для ML-моделей. Воссоздание необходимых источников на промышленных данных. Разработка витрин с признаками и целевыми переменными для ML-моделей. Подготовка, тестирование и сборка прототипов, с помощью Jenkins, для внедрения ML-моделей в промышленный контур и их оркестрация с помощью oozie. Мониторинг и поддержка витрин и ML-моделей в промышленном контуре. Разработка библиотек и инструментов для упрощения жизни data scientist’ов. Рефакторинг и оптимизация кода

Университет

Нижнетагильский технологический институт (филиал) Уральского федерального университета имени первого Президента России Б.Н. Ельцина

Университет

Apache spark для Data Engineering

Родной язык

Русский

Иностранные языки

Английский

Ключевые навыки

• Python

• Знание git

• Ms sql

• django framework

• Python: pandas; requests, scrapy, numpy; skipy, json, xlwt, xlrd, pyspark;

• Apache spark