Backend-разработчик / Middle Scrapy

Волгоград
Полный день
ООО БРЕНД КВАД

Компания Brandquad объединяет бренды производителей и ритейлеров при помощи умного электронного каталога и дополнительных модулей. Оптимизирует работу специалистов по e-comm и контенту, маркетологов и менеджеров по продажам. Ускоряет процессы размещения товаров на сайтах, предоставляет инструменты для анализа и контроля в e-comm и помогает найти точки роста.


Обязанности:

  • Написание веб-пауков для парсинга сайтов, поддержание и фикс уже существующих парсеров;
  • Парсинг сайтов с региональными ограничениями;
  • Парсинг сайтов со встроенной капчей для верификации пользователя (reCAPTCHA, hCaptcha);
  • Парсинг сайтов со встроенной защитой от ботового трафика (Datadome, Incapsula/Imperva, Amazon Cloudfront, Akamai);
  • Исследование и внедрение новых способов парсинга для повышения качества и скорости сбора данных;
  • Работа с высоконагруженными микросервисами для анализа и обработки больших объемов данных;
  • Подготовка технической документации (confluence);
  • Участие в командных Scrum-мероприятиях;

Стек технологий:

  • Python 3.6;
  • Scrapy;
  • Splash;
  • Selenium;
  • Puppeteer;
  • Django;
  • PostgreSQL;
  • RabbitMQ;
  • Docker.

Мы предлагаем:

  • Перспективы профессионального и карьерного роста;
  • Молодой и дружный коллектив, постоянное обучение по продуктам компании; ∙ Стабильная заработная плата;
  • Официальное трудоустройство по ТК РФ;
  • График работы 5/2 с 9 до 18 или с 10 до 19, возможна удаленная работа по согласованию с руководителем.