Менеджер по продукту, Инструменты AB-тестирования

Каждый день продуктовые команды в Ozon проводят десятки АБ-экспериментов. После завершения этих экспериментов необходимо быстро и точно оценить влияние на ключевые показатели: количество заказов, прибыль, конверсии и многие другие. Мы создали платформу, которая помогает продакт-менеджерам и аналитикам легко проводить AB тесты и принимать обоснованные решения на основе данных.

Десятки миллионов покупателей пользуются сайтом ежедневно, создавая огромный поток событий. Платформа отвечает за вычисление более 700 метрик и различных статистических тестов для них, создание удобной платформы для заведения и предварительного анализа метрик, инфраструктуры для аудита метрик (АА-тесты), разработки решений для постанализа экспериментов, создание инструментов для корректного заведения АБ-тестов (MDE, Sequential testing), алертинга по проблемным данным и возможностью ранней остановки, KPI-монитора с интеграцией АБ-экспериментов.

Вам предстоит:

• Работать с проблемами пользователей, собирать и подготавливать к разработке бизнес требования.
• Вести задачи с командами бэкенд и фронтенд разработки Стенда метрик.
• Участвовать в улучшении процесса работы с метриками в рамках A/B-тестирования в Ozon.
• Управлять ожиданиями стейкхолдеров.
• Формировать стратегию и дорожную карту развития Стенда Метрик.

Мы ожидаем:

• Опыт на аналогичной позиции от 2-х лет.
• Понимание ключевых этапов и аспектов разработки продукта.
• Структурное и критическое мышление.
• Можете аргументированно отстаивать свою точку зрения.
• Опыт проектного управления в IT.

Будет плюсом:

• Технический или аналитический бэкграунд.
• Практические навыки для анализа данных в Python + SQL.
• Опыт работы с BigData-продуктами.
• SQL на базовом уровне: группировки или JOIN или подзапросы.
• Понимание принципов дизайна и анализа A/B тестов.

Статьи на Хабре нашей команды:

• Без А/B результат XЗ, или Как построить высоконагруженную платформу А/B-тестов https://habr.com/ru/companies/ozontech/articles/689052/.
• Шесть причин, почему ваши A/B-тесты не работают https://habr.com/ru/companies/ozontech/articles/712306.

Свежий доклад про архитектуру Стенда Метрик:

• https://www.youtube.com/watch?v=jFMbBHIEmWU