- Страна
- Россия
- Зарплата
- до 600 000 ₽
Откликайтесь
на вакансии с ИИ
Product DS / ML-аналитик в AI-центр
Оценка ИИТ-Банк — топовый работодатель с сильной инженерной культурой. Работа с LLM в масштабном продукте и конкурентная зарплата делают вакансию крайне привлекательной.
Сложность вакансии
Оценка ИИПозиция требует глубоких знаний как в продуктовой аналитике (A/B-тесты, метрики), так и в ML (LLM, Langfuse). Высокая планка ожиданий по самостоятельности и опыту работы с генеративными моделями.
Анализ зарплаты
Оценка ИИПредложенная вилка до 600k Gross является верхней границей рынка для Senior-специалистов в области ML-аналитики в России. Это значительно выше среднего уровня, что подчеркивает сложность задач и статус компании.
Сопроводительное письмо
Составьте идеальное письмо к вакансии с ИИ-агентом
Откликнитесь в Т-Банк уже сейчас
Присоединяйтесь к команде Т-Банка и создавайте будущее AI-ассистентов на базе LLM!
Описание вакансии
Всем привет!
Ищем заряженных Product DS / ML-аналитиков во Вселенную ассистентов АИ-центра Т-Банка. Разрабатываем экосистему AI-ассистентов для всей компании на базе LLM. Сейчас в экосистеме 4 ассистента: Дженерал, Шопинг, Инвест и Джуниор.
Наша команда закрывает два направления:
\* Продуктовая аналитика: исследования, АБ-тесты, создание нетривиальных метрик (смотрим и в сторону продукта, и в сторону работы ассистента). DWH и отчётность ведут смежные команды - мы для них заказчики.
\* Аналитика качества: активно развивающаяся область. Ищем причинно-следственные связи оффлайн / онлайн метрик, настраиваем интегральную оценку: LLM-as-a-judge → ассесоры в зависимости от метрик уверенности
Локация и формат: гибрид или удаленка (обсудим)
Вилка: до 600k Gross + премии
Стек: SQL, Python, Langfuse.
Мы вероятно подружимся, если ты:
\* Готов плотно работать с LLM-продуктами и текстовыми данными
\* Самостоятелен, имеешь продуктовое мышление и умеешь предлагать гипотезы
И скорее точно подружимся, если ты:
\* Делал Pet-проекты с LLM-агентами
\* Имеешь крутой академический трек и/или опыт на стыке продуктовой аналитики и Data Science (чат-боты, поиск, рекламные аукционы, генеративные модели, ridetech)
\* Работаешь в одной из доменных сфер: kidtech, e-commerce, fintech
Контакты для отклика: Пишите мне Откликнуться или Кате Откликнуться
Создайте идеальное резюме с помощью ИИ-агента
Навыки
- SQL
- Python
- Langfuse
- LLM
- A/B Testing
- Data Science
- Product Analytics
Возможные вопросы на собеседовании
Проверка понимания специфики оценки качества генеративных моделей.
Как бы вы спроектировали систему метрик для оценки качества ответов LLM-ассистента в домене 'Инвестиции'?
Оценка опыта работы с современными инструментами мониторинга LLM.
Расскажите о вашем опыте работы с Langfuse или аналогичными инструментами для трейсинга и отладки LLM-приложений.
Проверка навыков работы с данными и поиска инсайтов.
Как вы будете искать причинно-следственную связь между оффлайн-метриками (например, оценка LLM-as-a-judge) и онлайн-метриками продукта?
Оценка продуктового мышления и умения работать с гипотезами.
Предложите гипотезу для улучшения удержания (retention) пользователей в ассистенте 'Джуниор'. Как бы вы ее протестировали?
Проверка технической базы в области DS.
В каких случаях вы бы предпочли использовать ассесоров вместо LLM-as-a-judge, и как бы вы настраивали интегральную оценку в такой системе?
Похожие вакансии
Python разработчик (DWH/Data Engineering)
Data Scientist Middle+, Senior
Data Scientist
Data Engineer
Middle+ Data инженер
Backend / ML Infrastructure / MLOps инженер
1000+ офферов получено
Устали искать работу? Мы найдём её за вас
Quick Offer улучшит ваше резюме, подберёт лучшие вакансии и откликнется за вас. Результат — в 3 раза больше приглашений на собеседования и никакой рутины!