English Linguistic Expert - Evaluator

О позиции

Mercor — платформа, объединяющая элитных творческих и технических специалистов с ведущими лабораториями исследований искусственного интеллекта. Компания работает со звёздными инвесторами из Кремниевой долины. Вакансия предполагает удалённую работу над проектами по развитию языковых моделей и повышению качества работы LLM.

Чем заниматься

• Оценивать качество и точность текста, сгенерированного языковыми моделями, в различных сценариях использования
• Править, редактировать и переписывать английский контент для соответствия высоким лингвистическим и стилистическим стандартам
• Аннотировать тексты для выявления грамматических, синтаксических, семантических и стилистических особенностей
• Выявлять ошибки моделей, несоответствия и языковые пробелы, предоставлять обратную связь для улучшения работы LLM
• Предоставлять детальную лингвистическую аналитику для поддержки процессов обучения моделей

Что ждут

• Родной или почти родной уровень владения английским языком
• Отличное знание грамматики, синтаксиса, лексики и стилистики английского языка
• Профессиональный опыт в редактировании, proofreading, написании текстов, лингвистической аннотации или работе с данными NLP
• Глубокое понимание лингвистических нюансов, региональных вариантов, тональности и контекстно-приемлемого употребления языка
• Способность выявлять тонкие грамматические ошибки, неуклюжие формулировки и неестественные конструкции
• Внимание к деталям, аналитическое мышление и письменные коммуникационные навыки
• Навыки самостоятельной работы в распределённой удалённой команде

Будет плюсом

• Интерес к технологиям ИИ и языковым системам на основе LLM

Условия

• Конкурентная почасовая оплата $50/час (~823 000 ₽/мес)
• Дистанционный формат работы без географических ограничений
• Работа над современными проектами в области искусственного интеллекта
• Гибкий график выполнения задач
• Доступ к передовым инструментам и платформе для взаимодействия с командой

Навыки

• Natural Language Processing
• Text Analysis
• English Linguistics
• Editing and Proofreading
• LLM Evaluation
• Linguistic Annotation
• Grammar Analysis
• Style Writing

Могут спросить на собеседовании

1. Как вы подходите к оценке качества текста, сгенерированного языковой моделью?
2. Приведите пример сложной языковой ошибки, которую вам пришлось выявить и проанализировать.
3. Какие аспекты работы с LLM и данными для их обучения вам наиболее интересны?
4. Как вы организуете свою работу при выполнении больших объёмов аннотаций?