- Страна
- Россия
Откликайтесь
на вакансии с ИИ
Data Engineer/ Backend developer
Оценка ИИИнтересные задачи на стыке Data Engineering и Backend в сфере ИИ-интеграции. Проектная занятость и отсутствие бюрократии привлекательны, однако отсутствие четкой вилки зарплаты и долгосрочных гарантий штатной позиции снижает балл.
Сложность вакансии
Оценка ИИРоль требует глубокой экспертизы в специфической нише: обход антибот-систем, реверс-инжиниринг API и работа с высоконагруженными парсерами. Необходим опыт от 3 лет и владение инструментами вроде Playwright и AsyncIO.
Анализ зарплаты
Оценка ИИВ вакансии не указан уровень оплаты, однако для специалиста с опытом от 3 лет в нише Web Scraping рыночные предложения в России обычно начинаются от 200 000 рублей. Верхняя граница может достигать 350 000 рублей и выше для экспертов по реверс-инжинирингу.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь в QLAN уже сейчас
Присоединяйтесь к команде QLAN и создавайте высоконагруженные системы сбора данных для ИИ-решений!
Описание вакансии
Data Engineer/ Backend developer
Компания: QLAN - технологический интегратор, который внедряет end-to-end ИИ-решения в бизнес-процессы крупных компаний и госсектора.
Задачи:
- Писать кастомные парсеры под соц сети, медиахостинги и маркетплейсы
- Реализовывать сервисы на Python
- Разрабатывать и поддерживать сервисы для сбора данных
Требования:
- опыт разработки и поддержки высоконагруженных парсеров/scrapers от 3х лет;
- Python от 3х лет;
- понимание типов различных прокси-серверов (ротация прокси, мониторинг качества), принципов работы CAPTCHA;
- работа с rate limiting;
- Playwright;
- AsyncIO, aiohttp/httpx
- опыт reverse engineering внутренних API веб- и мобильных приложений
- опыт работы с базами данных (PostgreSQL / ClickHouse / Redis)
- отличное понимание HTTP/TCP, работы CDN, REST API, GraphQL, антибот-систем и методов их обхода;
Будет плюсом:
- Опыт разработки парсеров для площадок: Instagram, YouTube, Tik Tok, Trip Advisor, Spotify, X, Flickr, LinkedIn, Reddit и аналогичные
- Опыт работы с Grafana/Prometheus
Kubernetes;
- Kafka/RabbitMQ;
Мы предлагаем:
- Проектная занятость с гибким форматом работы
- Прямая коммуникация с техническим руководством без бюрократии
- Возможность вырасти в полноценную техническую роль внутри компании
Контакты:
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- Python
- asyncio
- Playwright
- aiohttp
- httpx
- PostgreSQL
- ClickHouse
- Redis
- REST API
- GraphQL
- HTTP
- TCP
- Reverse Engineering
- Grafana
- Prometheus
- Kubernetes
- Kafka
- RabbitMQ
Возможные вопросы на собеседовании
Проверка практического опыта работы с защищенными ресурсами.
Расскажите о самом сложном случае обхода антибот-системы: какие методы детекции использовались и как вы их обошли?
Оценка навыков проектирования масштабируемых систем сбора данных.
Как бы вы спроектировали систему ротации прокси для парсинга Instagram с учетом жестких лимитов и блокировок?
Проверка навыков реверс-инжиниринга.
Каков ваш алгоритм действий при исследовании закрытого API мобильного приложения, если трафик зашифрован или используется SSL Pinning?
Оценка владения асинхронным программированием.
В каких случаях в парсерах стоит предпочесть Playwright вместо обычных HTTP-запросов через aiohttp, и как это влияет на производительность?
Проверка навыков работы с БД в контексте больших данных.
Как оптимизировать запись данных в ClickHouse при интенсивном потоке из нескольких сотен параллельных воркеров-парсеров?
Похожие вакансии
Senior Golang Developer
Java-разработчик
Golang developer [Middle+/Senior]
Java-разработчик
Senior Python Developer
Python Backend Developer — Senior / Tech Lead (CTO проекта)
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!