Backend-разработчик / Middle Scrapy
Волгоград
Полный день
ООО БРЕНД КВАД
Компания Brandquad объединяет бренды производителей и ритейлеров при помощи умного электронного каталога и дополнительных модулей. Оптимизирует работу специалистов по e-comm и контенту, маркетологов и менеджеров по продажам. Ускоряет процессы размещения товаров на сайтах, предоставляет инструменты для анализа и контроля в e-comm и помогает найти точки роста.
Обязанности:
- Написание веб-пауков для парсинга сайтов, поддержание и фикс уже существующих парсеров;
- Парсинг сайтов с региональными ограничениями;
- Парсинг сайтов со встроенной капчей для верификации пользователя (reCAPTCHA, hCaptcha);
- Парсинг сайтов со встроенной защитой от ботового трафика (Datadome, Incapsula/Imperva, Amazon Cloudfront, Akamai);
- Исследование и внедрение новых способов парсинга для повышения качества и скорости сбора данных;
- Работа с высоконагруженными микросервисами для анализа и обработки больших объемов данных;
- Подготовка технической документации (confluence);
- Участие в командных Scrum-мероприятиях;
Стек технологий:
- Python 3.6;
- Scrapy;
- Splash;
- Selenium;
- Puppeteer;
- Django;
- PostgreSQL;
- RabbitMQ;
- Docker.
Мы предлагаем:
- Перспективы профессионального и карьерного роста;
- Молодой и дружный коллектив, постоянное обучение по продуктам компании; ∙ Стабильная заработная плата;
- Официальное трудоустройство по ТК РФ;
- График работы 5/2 с 9 до 18 или с 10 до 19, возможна удаленная работа по согласованию с руководителем.