Чем заниматься:
- В паре с reverse engineer разрабатывать решения по скрапингу:
а)обход блокировок
б)извлечение нужных data points
в)обеспечение стабильной нагрузки
- Искать способы обхода защит и оптимизации существующих решений
- Напрямую взаимодействовать с data-командой, которая использует полученные данные
Требования:
- Опыт работы с прокси и решениями для обхода капч
- Уверенное понимание, как работают анти-бот системы
Стек:
- Python, PHP, немного Java (есть возможность унифицировать стек)
- Базы: MongoDB, ClickHouse
- Мониторинг: DataDog, Graylog
Английский: уметь общаться письменно (устно не требуется), есть часть англоязычная часть команды с кем надо будет взаимодействовать.