ML-разработчик в команду Alice AI Safety

Мы занимаемся AI Safety в Alice AI и ищем ML-разработчика в нашу команду. Самый большой трек для нас сейчас — работа над улучшением ответов генеративных моделей. Мы стремимся сделать их более безопасными и этичными. Наша команда занимается подготовкой бенчей для оценки качества, корзин для обучений генераторов, реворд-моделей, а также обучением LLM- и VLM-асессоров, разработкой и поддержкой каскада моделей в AliceAI. Приходите, если вы готовы к тестированию новых идей и привыкли доводить эксперименты до продакшена.

Какие задачи вас ждут:
Аналитические задачи вокруг ML-моделей

Мы живём в эпоху, когда качество ML-систем в наибольшей степени определяется данными. Поэтому значительная часть нашей работы — это сбор лёрна, валидация и приёмка моделей, мониторинг продакшена и оперативный поиск проблем.

NLP-разработка

Чтобы умный ассистент действительно работал эффективно, ему нужны дополнительные ML-модели: они понимают намерения пользователя, определяют подходящий сценарий и запускают соответствующий механизм ответа. Поэтому мы разрабатываем, обучаем и поддерживаем целый набор LLM-моделей, регулярно обновляя их и добавляя новые сценарии взаимодействия.

LLM-асессоры

Для подготовки лёрнов, приёмок и замера качества моделей нам приходится обрабатывать огромные массивы данных. Чтобы делать это быстро и эффективно, мы создаём LLM-асессоров — модели, которые размечают данные с человеческим (а порой и более высоким) качеством, но работают значительно быстрее и стоят дешевле.

Больше об ML в Яндексе — в канале Yandex for ML

Мы ждем, что вы:
- Работали с задачами машинного обучения и LLM-моделями
- Умеете разрабатывать и оптимизировать промпты
- Уверенно владеете Python и SQL
- Готовы работать с данными вручную, разбираться в устройстве и логике разрабатываемых моделей
- В высокой степени самостоятельны и готовы брать на себя новые, нетривиальные задачи, для которых ещё не существует готовых решений