backend developer для сбора данных

грейд
middle
формат
удалённо
опубликована
сегодня

описание

QLAN внедряет сквозные ИИ-решения в бизнес-процессы крупных компаний и государственных структур.

*Instagram и Facebook принадлежат компании Meta Platforms Inc., деятельность которой признана экстремистской и запрещена на территории РФ

задачи

  • Писать кастомные парсеры для социальных сетей, медиахостингов и маркетплейсов
  • Реализовывать сервисы на Python
  • Разрабатывать и поддерживать сервисы для сбора данных

требования

  • Опыт разработки и поддержки высоконагруженных парсеров от 3 лет
  • Опыт разработки на Python от 3 лет
  • Понимание типов прокси-серверов, ротации прокси и мониторинга их качества
  • Понимание принципов работы CAPTCHA
  • Опыт работы с ограничением частоты запросов
  • Опыт работы с Playwright, AsyncIO, aiohttp или httpx
  • Опыт обратной разработки внутренних API веб- и мобильных приложений
  • Опыт работы с PostgreSQL, ClickHouse или Redis
  • Отличное понимание HTTP/TCP, CDN, REST API, GraphQL, антибот-систем и методов их обхода
  • Будет плюсом: опыт разработки парсеров для Instagram, YouTube, TikTok, TripAdvisor, Spotify, X, Flickr, LinkedIn, Reddit и аналогичных площадок, опыт работы с Grafana или Prometheus, Kubernetes, Kafka или RabbitMQ

условия

  • Проектная занятость с гибким форматом работы
  • Прямая коммуникация с техническим руководством без бюрократии
  • Возможность вырасти в полноценную техническую роль внутри компании

навыки

компания

похожие вакансии

статьи для разработчиков