Разработчик парсеров для сбора данных с маркетплейсов, реверс-инжиниринг MobApp, работа с Cloudflare

24TTL.net — продуктовая аккредитованная IT-компания, резидент инновационного центра «Сколково». Мы разрабатываем решения в области digital merchandising для крупного бизнеса в сегменте онлайн-ритейла, помогая анализировать представленность брендов на торговых площадках и маркетплейсах по всему миру с помощью сервиса аналитики и мониторинга 24ORM.com – в СНГ, Ближнем Востоке, Индонезии и Корее. Сотрудничаем с крупнейшими мировыми брендами, — LG, P&G, LEGO, Microsoft, Sennheiser, Lenovo, Colgate-Palmolive, Abbott и другими.

Приглашаем разработчика парсеров / реверс-инженера в команду SaaS-сервиса аналитики и мониторинга 24ORM для проектирования, разработки и поддержки приложений.

Чем предстоит заниматься:

• Разработка программ для регулярного сбора данных с защищенных онлайн-магазинов и маркетплейсов (например, получение информации о ценах, названиях товаров, описаниях, изображениях, статусе наличия или отсутствия товаров).

• Их регулярная поддержка и обновление при необходимости.

• Поиск способов обхода защиты от парсинга (например, Qrator или Cloudflare), включая captcha, эмуляция запросов пользователя, с использованием прокси-серверов и задержек между запросами.

• Сохранение результатов парсинга в структурированном формате (например, CSV или база данных).

• Оптимизация производительности при работе с большим объемом данных.

Что ожидаем от кандидата:

• Подтвержденный опыт разработки программ для сбора данных (парсинга) с веб-сайтов или через API мобильных приложений.

• Знание Golang, Python или другого языка программирования.

• Умение эффективно обходить механизмы защиты.

• Опыт обратного проектирования (reverse engineering) для анализа структуры мобильных приложений и поиска API-эндпоинтов.

• Опыт работы с базами данных SQL, желательно Postgres и NoSQL; преимуществом будет опыт работы с Clickhouse.

• Понимание основ CI/CD: работа с Docker, Kubernetes

• Широкий кругозор и понимание принципов работы бэкенда.

• Готовность к сотрудничеству и оптимизации процесса.

Что предлагаем:

• Официальное трудоустройство, оформление по ТК РФ в аккредитованной IT-компании.

• Удаленный формат работы: 5/2 с 10.00 до 19.00.

• Стабильные выплаты заработной платы 2 раза в месяц, оплачиваемый отпуск.

• Сопровождение проектов для международных брендов.

• Работа в компании с сильной внутренней культурой.

• Отсутствие бюрократии в процессах.

• Развитие не только в написании кода, но и в понимании бизнес-задач.

• Работа в молодом и дружном коллективе.