Описание вакансии
Руководство разработкой решений для преодоления сложных анти-скрейпинговых механизмов, поддержка крупномасштабных распределенных скрейпинговых систем и обеспечение стабильного сбора данных из ключевых источников. Глубокое понимание логики количественной торговли, тесное сотрудничество с командой для преобразования бизнес-требований в эффективные технические решения. Тесная работа с продуктом, дизайном и фронтенд-командами для обеспечения высокого качества результатов.
Ключевые обязанности
- Проектирование и поддержка надежных распределенных скрейпинговых систем для решения проблем анти-скрейпинга
- Разработка технических решений, соответствующих бизнес-требованиям количественной торговли
- Межфункциональное сотрудничество с менеджерами продуктов, дизайнерами и фронтенд-разработчиками
- Обеспечение стабильности системы и качества данных для ключевых источников
- Оптимизация производительности и эффективности скрейпинга через технические инновации
Требования к кандидату
- Прочная инженерная база:
- 3+ года опыта разработки на Python с сильными основами CS (структуры данных, алгоритмы, сети, ОС)
- Глубокое понимание внутренней работы Python (GIL, управление памятью), владение моделями процессов/потоков/корутин
- Опыт работы с фреймворками FastAPI/Django, MySQL/Redis, проектирование и оптимизация баз данных
- Владение Docker, знакомство с Kubernetes, способность к самостоятельному развертыванию
- Скрейпинг и реверс-инжиниринг:
- 2+ года опыта сбора данных в крупных масштабах с использованием фреймворков Scrapy/Playwright
- Навыки реверс-инжиниринга JS для отладки и деобфускации кода
- Знание алгоритмов шифрования (RSA/AES/DES) в анти-скрейпинге
- Экспертиза в анти-скрейпинговых механизмах (CAPTCHA, блокировка IP, подпись запросов, детекция поведения)
- Опыт работы с очисткой и хранением структурированных/неструктурированных данных
Предпочтительные квалификации
- Практический опыт торговли с пониманием рыночных трендов
- Опыт применения ML/DL в распознавании свечных паттернов или алгоритмической торговле
- Знакомство с рынками цифровых валют, фьючерсов или ценных бумаг
- Сильное продуктовое мышление
- Опыт внедрения AI/ML
- Владение Golang
Преимущества
Для обсуждения преимуществ, пожалуйста, свяжитесь напрямую с HR через Telegram.