- Страна
- Россия
Откликайтесь
на вакансии с ИИ
Лид ML-аналитики в Нейросервисы
Оценка ИИРабота в топовой технологической компании над передовыми AI-продуктами с отличным соцпакетом и возможностью влиять на индустрию.
Сложность вакансии
Оценка ИИРоль требует редкого сочетания глубоких технических знаний в области LLM/ML и сильных управленческих навыков для выстраивания процессов с нуля в нескольких продуктах одновременно.
Анализ зарплаты
Оценка ИИЗарплата для позиций уровня Lead в Яндексе обычно находится в верхнем дециле рынка, часто включая значительную бонусную часть и опционы (RSU), что делает совокупный доход выше среднего по рынку РФ.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь в Яндекс уже сейчас
Присоединяйтесь к команде Яндекса и создавайте будущее AI-сервисов для бизнеса уже сегодня!
Описание вакансии
*❣️ Лид ML-аналитики в Нейросервисы*
Мы строим AI-сервисы для бизнеса на базе технологий Яндекса. Среди наших продуктов — Нейроюрист, Алиса Про и Нейросаппорт. Параллельно мы активно развиваем новые направления Нейросейлз и Нейробухгалтер. Ищем лида ML-аналитики, который поможет выстроить сильную функцию аналитики качества AI-сервисов.
Какие задачи вас ждут:
• Развитие аналитики качества LLMОсновная часть работы связана с качеством AI-продуктов и ML-систем. Вам предстоит вместе с командами искать способы измерять качество моделей и AI-сценариев, строить систему метрик, улучшать процессы оценки и помогать командам быстрее и безопаснее запускать изменения.
• Построение процессов ML-аналитикиНужно будет выстроить понятные процессы вокруг оценки качества: от ручной разметки и продуктовых исследований до LLM-as-a-judge и автоматических проверок.
• Работа с несколькими сервисами одновременноВам предстоит помогать AI-продуктам и новым гипотезам: Нейроюристу, Алисе Про, Нейросаппорту, Нейросейлзу и др. Нужно будет уметь быстро переключаться между задачами, видеть общие паттерны и переносить лучшие практики между командами.
• Управление командой и её развитиеВы будете нанимать и развивать ML-аналитиков, помогать им расти и формировать сильную инженерно-продуктовую культуру вокруг аналитики качества AI.
Мы ждём, что вы:
• Руководили аналитиками, ML-аналитиками или quality-направлениями
• Умеете строить метрики качества для AI-систем
• Уверенно владеете SQL и Python
Будет плюсом, если вы:
• Работали с LLM-as-a-judge, synthetic data или автоматическими evals
• Строили ML-метрики или платформы оценки качества
• Умеете работать с AI-ассистентами, RAG-системами или агентами
• Понимаете специфику B2B- и enterprise-AI-продуктов
Почему у нас классно:
ДМС Яндекса действует с первого месяца работы. Причём получить плановую или неотложную помощь можно и за рубежом — так что можно не бояться путешествовать. Это не все бонусы — полный список тут.
*📩* Откликнуться на нашем сайте
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- ML
- LLM
- SQL
- Python
- LLM-as-a-judge
- Synthetic Data
- RAG
- B2B
- Data Analysis
Возможные вопросы на собеседовании
Проверка опыта в ключевой задаче вакансии — оценке качества генеративных моделей.
Расскажите о вашем опыте внедрения LLM-as-a-judge: с какими основными проблемами (bias, согласованность) вы сталкивались и как их решали?
Важно понять, как кандидат будет приоритизировать задачи между разными сервисами (Алиса, Нейроюрист и т.д.).
Как вы будете выстраивать работу команды, если одновременно придут запросы на разработку метрик от трех разных AI-продуктов с разными бизнес-целями?
Оценка способности кандидата создавать надежные системы мониторинга.
Какие метрики вы бы предложили для оценки качества RAG-системы в B2B-сервисе, где критически важна фактическая точность ответов?
Проверка лидерских качеств и подхода к найму.
Какими компетенциями должен обладать идеальный ML-аналитик в вашей команде и как вы планируете проверять их на собеседовании?
Оценка технического кругозора в области синтетических данных.
В каких случаях вы бы отдали предпочтение использованию синтетических данных для оценки моделей вместо ручной разметки экспертами?
Похожие вакансии
Team Lead Data Science / ML
MLOps инженер (Team Lead)
MLOps инженер (Тимлид)
Тимлид команды data‑инженеров
Team Lead ML в Авиасейлс (Travelpayouts)
Team Lead Data Engineer
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!