- Страна
- Россия
Откликайтесь
на вакансии с ИИ
ML-аналитик в команду продукта Нейросейлз
Оценка ИИРабота в Яндексе над передовыми ML-технологиями — это отличный кейс для портфолио. Вакансия предлагает интересные задачи на стыке аналитики и продукта, хотя уровень компенсации в тексте не указан.
Сложность вакансии
Оценка ИИРоль требует глубоких знаний в матстате и теории вероятностей, а также умения работать на стыке аналитики и ML-инженерии. Сложность заключается в необходимости выстраивания сложных процессов разметки и методологий оценки для LLM-проектов.
Анализ зарплаты
Оценка ИИВ вакансии не указана зарплата, однако для позиции ML-аналитика в Яндексе (уровень Middle/Senior) рыночные ожидания в Москве составляют от 250 000 до 450 000 рублей. Предложенный диапазон соответствует средним значениям для крупных технологических компаний России.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь в Яндекс уже сейчас
Присоединяйтесь к команде Яндекса и развивайте передовые ML-продукты в области Нейросейлз!
Описание вакансии
ML-аналитик в команду продукта Нейросейлз
#гибрид
Компания: Яндекс
🔹Какие задачи вас ждут
-Оценка качества продукта с помощью экспертной оценки
Вам предстоит развивать и дорабатывать методологию, которая позволит ML- и продуктовой командам находить точки роста и извлекать инсайты из данных. Вы будете работать в тесной связке с юристами-экспертами и напрямую влиять на улучшение качества модели.
-Разработка инструментов для разметки данных
Наши продукты требуют значительного объёма текстовых данных для обучения и валидации. Вам предстоит выстроить полный цикл разметки и подготовки обучающих и валидационных датасетов, организовать процессы контроля качества и обеспечить надёжность и согласованность разметки.
-Сравнительный анализ качества внутренних конфигураций продукта и внешних моделей
Ваша задача — создать инструменты для статистически корректного сравнения и бенчмаркинга решений на основе экспертной разметки и автоматических методов оценки качества, чтобы команда могла принимать обоснованные решения о развитии продукта.
🔹Мы ждем, что вы
-Уверенно владеете SQL и Python
-Знаете математическую статистику и теорию вероятностей
-Обладаете структурным мышлением и умеете формулировать выводы на основе данных
-Понимаете основы A/B-тестирования и оценки изменений в продукте
-Знаете основы ML
Контакты: Откликнуться
🔥 Подписаться на наши каналы / @best_itjob / @it_rab
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- SQL
- Python
- Statistics
- Probability Theory
- A/B Testing
- Machine Learning
- Data Analysis
Возможные вопросы на собеседовании
Проверка фундаментальных знаний, необходимых для корректного сравнения моделей.
Как вы будете рассчитывать необходимый объем выборки для экспертной разметки, чтобы результаты сравнения двух конфигураций модели были статистически значимыми?
Оценка опыта в организации процессов подготовки данных, что является ключевой задачей вакансии.
Опишите ваш подход к контролю качества (QA) при работе с большим объемом текстовой разметки. Как вы боретесь с субъективностью экспертов?
Проверка понимания специфики оценки генеративных моделей или сложных ML-систем.
Какие метрики, помимо стандартных Accuracy/F1, вы бы предложили для оценки качества ответов нейросети в задачах продаж?
Проверка навыков работы с данными и инструментарием.
Расскажите о самом сложном SQL-запросе или Python-скрипте, который вы писали для подготовки обучающего датасета. С какими проблемами производительности вы столкнулись?
Оценка продуктового мышления и умения интерпретировать данные.
Если результаты A/B-теста показывают рост продуктовых метрик, но экспертная оценка качества ответов модели снизилась, какими будут ваши действия?
Похожие вакансии
ML-инженер
Python разработчик (DWH/Data Engineering)
Data Scientist Middle+, Senior
Data Scientist
Middle+ Data инженер
Data инженер (Middle)
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!