Технический аналитик на LLM-Router (экономика и качество LLM API)
Оценка ИИИнтересный и актуальный проект на стыке AI и финтеха с прозрачной оплатой в долларах. Удаленный формат и работа с современным стеком (ClickHouse, LLM) делают вакансию привлекательной для опытных аналитиков.
Сформировано ИИ автоматически. Не является проверкой вакансии или работодателя.
Сложность вакансии
Оценка ИИРоль требует редкого сочетания глубоких технических навыков (SQL, Python, API) и понимания юнит-экономики продукта. Высокий порог входа обусловлен необходимостью работать с LLM-спецификой и большими объемами данных.
Сформировано ИИ автоматически. Не является проверкой вакансии или работодателя.
Анализ зарплаты
Оценка ИИПредлагаемая зарплата от $2100 (около 200 000 руб.) соответствует нижней границе рыночного диапазона для Senior-аналитиков в России, но может быть ниже среднего уровня для специалистов с опытом более 6 лет в узкой нише LLM.
Сформировано ИИ автоматически. Не является проверкой вакансии или работодателя.
Сопроводительное письмо
Составьте сопроводительное письмо под эту вакансию с вашим резюме
Описание вакансии
Data Light
Технический аналитик на LLM-Router (экономика и качество LLM API)
от 2 100 $ за месяц, на руки
Опыт работы: более 6 лет
Проектная работа
Формат работы: удалённо
*☑️* Наши пожелания к кандидатам
-Опыт самостоятельной аналитической работы в технических продуктах: от постановки задачи и проверки данных до выводов и внедрения изменений
-Уверенное владение SQL: сложные объединения, оконные функции, агрегации, поиск пропусков и дублей, анализ больших объёмов событий
-Владение Python для анализа данных, работы с API и автоматизации регулярных проверок
-Понимание HTTP, REST API и JSON; умение самостоятельно выполнить тестовый запрос, изучить ответ и проанализировать логи
-Понимание принципов потоковой передачи данных, таймаутов, повторных запросов и их влияния на учёт и стоимость
-Понимание экономики продукта: себестоимость, выручка, маржинальность, влияние тарифов и технических ошибок на финансовый результат
-Навыки сверки данных из разных источников, проверки полноты и достоверности, поиска первопричин расхождений
-Умение формулировать требования к мониторингу и отчётности, составлять ТЗ для нашей технической команды и проверять результат
-Системность, внимание к деталям; умение подтверждать выводы данными, обсуждать спорные вопросы конструктивно и доводить проблемы до решения
-Будет плюсом:
-Опыт работы с PostgreSQL и ClickHouse
-Опыт с биллингом, тарификацией, финансовыми сверками или контролем облачных расходов
-Опыт аналитики API-сервисов, платёжных систем, телекома или других продуктов с большим объёмом транзакций
-Опыт построения регулярного мониторинга, автоматических проверок и дашбордов
-Знакомство с LLM API, учётом входных и выходных токенов, кешированием и маршрутизацией запросов
Контакты: Откликнуться
Умный подбор, сопроводительные письма, советы по отказам — больше приглашений.
Навыки
- Data Analysis
- Python
- LLM
- SQL
- PostgreSQL
- JSON
- REST API
- Monitoring
- ClickHouse
- Unit Economics
Возможные вопросы на собеседовании
Проверка понимания специфики LLM-продуктов и их экономики.
Как бы вы спроектировали систему мониторинга затрат на токены в реальном времени для нескольких провайдеров LLM?
Оценка навыков работы с данными и поиска аномалий.
Опишите ваш алгоритм действий при обнаружении расхождений в данных между логами API и биллинговой системой.
Проверка владения SQL для сложных аналитических задач.
Напишите пример оконной функции для расчета среднего времени ответа API (latency) в разрезе последних 100 запросов для каждого пользователя.
Оценка понимания технических аспектов работы API.
Как таймауты и повторные запросы (retries) влияют на точность финансовой аналитики и как это учитывать в отчетах?
Проверка умения работать с бизнес-метриками.
Какие метрики, помимо стоимости токенов, вы бы предложили отслеживать для оценки эффективности LLM-роутера?
Сформировано ИИ автоматически. Не является проверкой вакансии или работодателя.
