Fullstack-разработчик

High load сервис транзитного трекинга почтовых отправлений.
Интегрируем логистические данные по 20+ странам (США, Китай, РФ, Европа, Азия) через 150+ источников: национальные почтовые сервисы, логистические API, кустарные трекеры.

Проект живой и требует внимания к стабильности. Мы работаем на результат, но необходимо понимать: если сервис сбора данных «падает» ночью или в выходные, это требует вашей оперативной реакции.

Ключевая задача:
Построение отказоустойчивой распределенной системы сбора данных, где каждый источник — это отдельный вызов: reverse engineering API, headless-браузеры, капчи, WAF (Cloudflare, PerimeterX, Akamai), сложная fingerprint-защита.

Мы не просто пишем парсеры. Мы управляем сложной системой, где:

• Node.js — ядро парсинга (Puppeteer / Playwright, адаптеры под прокси, кастомные инстансы браузеров)
• PHP 7.4+ (Symfony/API Platform) — API-слой, веб-интерфейсы, управление задачами
• Golang — микросервисы для ротации прокси, очередей, метрик
• Swift / Kotlin — нативные мобильные клиенты с встроенными механизмами сбора (iOS/Android)
• Grafana + Prometheus / VictoriaMetrics — мониторинг здоровья парсинговых воркеров, latency, error budget
• GitHub Actions — CI/CD, автотесты парсеров, деплой конфигураций
• Linux — самостоятельное администрирование окружения (systemd, Docker, сетевые настройки)

Чем предстоит заниматься :
1. Разработка и поддержка парсеров на Node.js

• Писать и рефакторить парсеры с использованием Puppeteer / Playwright в режимах headless / headful
• Управлять пулом браузерных инстансов (launch args, isolation, resource limits)
• Реализовывать fallback-сценарии: API → браузер → мокапы

2. Reverse engineering и эмуляция пользователя

• Анализировать защищенные сайты: разбирать network-трафик (Chrome DevTools Protocol), восстанавливать алгоритмы формирования запросов
• Эмулировать поведение реального браузера: тайминги, движения мыши, скроллы, события ввода
• Работать с CDP напрямую для тонкой настройки инструментария

3. Fingerprint & Proxy-инфраструктура

• Настраивать кастомные fingerprint-подстановки: WebGL, Canvas, AudioContext, fonts, navigator, WebRTC
• Работать с прокси-агрегаторами (ротация по сессиям, sticky sessions, IPv4/IPv6, residential / datacenter)
• Обрабатывать CAPTCHA (reCAPTCHA v2/v3, hCaptcha) через сервисы распознавания или кастомные решения

4. Мониторинг и надежность

• Разрабатывать Grafana-дашборды под метрики: RPS парсинга, успешность/ошибки по источникам, latency, использование памяти/CPU браузерами
• Настраивать алерты (аварийное падение воркеров, аномальный рост ошибок, отсутствие данных по ключевым трекерам)
• Участвовать в on-call: оперативно чинить падения парсинговой инфраструктуры вне рабочего времени

5. Архитектура и код

• Проектировать модульную систему парсинга с возможностью быстрого добавления новых источников
• Писать код с учетом ООП (инкапсуляция логики парсинга, переиспользуемые адаптеры)
• Участвовать в код-ревью, поддерживать CI/CD (GitHub Actions)

Требования :

• Уверенное владение Puppeteer / Playwright, включая работу с CDPSession, перехват запросов, эмуляцию устройств
• Понимание event loop, управление памятью (heap snapshots, детекция утечек в долгоживущих процессах)
• Опыт написания парсеров, работающих с динамическим контентом (SPA, WebSockets, iframe)
• Знание методов сбора fingerprint: WebGL, Canvas, AudioContext, fonts, WebRTC, navigator properties
• Опыт обхода детекции headless-режимов (пропуск navigator.webdriver, подмена chrome.runtime)
• Понимание устройства прокси-цепочек, авторизации, работа с прокси-сервисами (Bright Data, SOAX, Proxy6 и т.д.)
• Настройка Grafana с нуля: создание дашбордов, настройка алертов, работа с PromQL
• Понимание SLO / SLA применительно к парсингу: что значит "падение сервиса сбора"

Базовые технологии, ООП и архитектура

• Linux (администрирование, network, systemd)
• Git (ветвление, rebase, code review)
• CI/CD: GitHub Actions (сборка, тесты, деплой)
• Понимание SOLID, паттернов проектирования (стратегия, адаптер, фабрика)
• Опыт работы с большими кодовыми базами и legacy-кодом

Будет преимуществом:

• Опыт с PHP 7.4+ (Symfony, Doctrine) — необходимо для доработок API и веб-интерфейсов
• Golang — микросервисы для прокси-менеджмента, очередей (NATS, RabbitMQ)
• Мобильная разработка (Swift / Kotlin) — интеграция встроенных парсеров в нативные приложения
• Работа с нейросетями: OCR (Tesseract, EasyOCR), решения для распознавания капч, классификация изображений
• Опыт работы с большим количеством одновременных браузерных сессий (>100 контекстов)
• Навыки работы с Docker / Docker Compose, оркестрация парсинговых воркеров

• График гибкий с пересечением по времени для оперативной связи в рабочее время, но с обязательством оперативного реагирования на инциденты в любое время суток (on-call).

• Формат работы: офис (Воронеж), удаленка, или гибрид — на твой выбор.

• Оплачиваемый отпуск и больничные.

• ДМС с расширенным пакетом (стоматология, стационар, скорая помощь).

• Зарплата: фикс, обсуждается по итогам собеседования, зависит от скиллов и готовности к условиям графика).
• Стек и свобода: вы сами выбираете подходы к обходу защиты, инструменты для фингерпринтинга, архитектуру новых парсеров.
• Интересные задачи: не "парсинг по инструкции", а реальный reverse engineering, работа с CDP, WAF, распределенными системами.

• Компенсация обучения на курсах, конференциях и покупки профессиональной литературы.

• Современный офис в центре города.

• Комфортная кухня-лаунж зона: Xbox, настольный футбол, кальян, бесплатные снеки и напитки.

• Отзывчивый HR, который поможет с любыми вопросами.

Как мы будем взаимодействовать:

• Знакомство с вашим опытом в парсинге и Node.js.
• Обсуждение кейсов: как вы решали проблемы с блокировками, как настраивали мониторинг.
• Возможное небольшое тестовое задание (или код-ревью ваших прошлых наработок) для оценки глубины понимания браузерных технологий.

Откликайтесь, если готовы погружаться в детали работы браузеров и прокси, а также не боитесь ответственности за стабильность сервиса 24/7.