Sr. Research Scientist - Agent Flywheel

О позиции

Вы присоединитесь к исследовательской организации Databricks, которая выдвигает границы корпоративного ИИ нового поколения. Команда работает над полным стеком — от обучения моделей до передовых многоагентных систем. Ваша задача — преобразовывать реальные производственные данные взаимодействия клиентов в детерминированные метрики и сигналы для улучшения агентов через обратную связь.

Будет плюсом

• Опыт работы с системами агентов: кодовые агенты, долгосрочные инструментально использующие агенты
• Портфолио новаторских исследований в обучении с обратной связью: post-training, RLHF, reward modeling
• Опыт построения environments для оценки агентов

Условия

• Работа в передовой команде корпоративного ИИ исследований мирового уровня
• Возможность влиять на развитие технологий, используемых тысячами компаний
• Конкурентная компенсация с ежегодным бонусом и опционами
• Комплексный пакет льгот и преимуществ
• Поддержка разнообразия и инклюзивности

Навыки

• Python
• Machine Learning
• Deep Learning
• LLM
• Reinforcement Learning
• RLHF
• Evaluation Frameworks
• Research Methodology
• Software Engineering
• Data Pipelines

Могут спросить на собеседовании

1. Как вы подходите к дизайну метрик и экспериментов для оценки эффективности автономных агентов?
2. Опишите сложный случай сбоя в многосоставной системе, который вам пришлось диагностировать, и как вы решили проблему
3. Как вы обеспечиваете качество и повторяемость обратной связи при обучении моделей с помощью RLHF или аналогичных подходов?
4. Какие последние тенденции в области агентных систем или оценки LLM вас наиболее впечатлили и почему?
5. Расскажите о случае, когда ваши исследования привели к значимому продуктивному улучшению. Как вы измеряли это улучшение?