NLP-инженер по тестированию ML-моделей

Мы — АТОМ. Разрабатываем электромобиль-гаджет и его версии для семьи, такси, каршеринга и службы доставки, а также собственный маркетплейс приложений и другие сервисы.

Мы ищем DS/ML инженера по тестированию ML-моделей в команду AI, LLM-Lab. Сервисы работают на основе больших языковых моделей (LLM).

Голосовой ассистент для заказа товаров и услуг, в котором используются передовые технологии распознавания и синтеза речи, понимания естественного языка на основе нейросетевых моделей.

Разработка умных чат-ботов и других проектов в домене LLM/NLP.

Ваши задачи:

• тестирование ML-моделей в домене обработки естественного языка (NLP), включая модели Mistral и Mixtral, Llama2/Llama 3;
• разработка и поддержка бенчмарков для оценки производительности моделей;
• анализ и оценка качественных показателей моделей в разных доменных областях;
• идентификация причин роста и деградации метрик моделей;
• подготовка и предоставление отчетов по результатам тестирования и анализа;
• разработка рекомендаций для ML-разработчиков по улучшению и корректировке моделей;
• поддержание и обновление информационной панели (dash-board) с ключевыми метриками моделей;
• тестирование датасетов.

Наши ожидания:

• опыт работы в тестировании и оценке машинного обучения, особенно в домене NLP. У Вас уже должен быть практический опыт с Bert, Mistral, Mixtral, Llama;
• знание методов машинного обучения, статистического анализа и алгоритмов.
• опыт работы с инструментами для визуализации данных и аналитики (например, Tableau, Power BI).
• умение работать с командой разработчиков и аналитиков.
• владение программированием на Python и знание библиотек для машинного обучения.
• умение четко формулировать технические выводы;
• знание английского языка на уровне, необходимом для чтения технической литературы.

Мы предлагаем:

• высокотехнологичный, интересный продукт, возможность создавать новые процессы и влиять на развитие;

• работа в команде высококвалифицированных профессионалов из России, Китая, Европы;

• корпоративная культура, выстраиваемая в духе инноваций, открытые горизонтальные коммуникации;

• конкурентная официальная белая заработная плата;

• годовой бонус;

• кафетерий льгот (“плюшки”) - ДМС со стоматологией, питание, транспорт, страхование жизни и имущества, фитнес, обучение и многое другое;

• бесплатный доступ к платформе с обучающими курсами iSpring, корпоративное обучение китайскому языку, спортивные командные игры и другие приятные мелочи;

• корпоративное оборудование;

• гибридный или удаленный формат работы;

• трудоустройство в аккредитованной ИТ-компании.

Пройди вместе с нами крутой кейс по созданию электромобиля с нуля!