Шеф-редактор — лид ИИ-тренеров по русскому языку в Яндекс Образование

Яндекс Образование занимается разработкой и предоставлением образовательных ресурсов и программ и активно внедряет ИИ в свои продукты. Нейросеть объясняет темы, подбирает задания, проверяет ответы, помогает увидеть пробелы и выстраивает дальнейшую подготовку. Чтобы эта работа была корректной и действительно полезной, её качество проверяет команда разметки.

Ищем шеф-редактора — лида ИИ-тренеров по русскому языку. Вы будете отвечать за ИИ-контент для школьников 5–11-х классов. Это не про уроки, а про предметную экспертизу. Большая часть задач связана с контролем качества ИИ-контента и работы команды. Нужно уметь посмотреть на спорное задание, принять решение, объяснить его разметчику и понять, единичная это проблема, или правило в инструкции нужно уточнить для всей команды.

Какие задачи вас ждут

Проведение ревью разметки ИИ-контента по русскому языку и поиск системных ошибок
Вы будете проверять задания, объяснения, ответы модели и обратную связь, которую она даёт ученику. Надо принимать решения в спорных случаях, когда задание выглядит нормальным, но на самом деле неоднозначно, не проверяет заявленный навык или допускает несколько ответов. Также нужно будет выявлять повторяющиеся проблемы и передавать их команде продукта и ML. Предстоит улучшать критерии оценки, когда на реальных примерах оказывается, что существующего правила недостаточно.

Отслеживание соответствия материалов школьной программе и экзаменационным форматам
Одна из ваших задач — проверять, что материалы корректно готовят ученика к ОГЭ и ЕГЭ: условие, правильный ответ, критерии, объяснение и соответствие проверяемому умению. Нужно работать с заданиями в экзаменационном формате, тренировочными заданиями по темам, объяснениями правил, разборами ошибок ученика и проверкой рукописных работ по фото.

Проведение калибровки разметчиков и разбор расхождений
Вы будете помогать команде одинаково применять критерии оценки: разбирать расхождения между разметчиками и ревьюерами, собирать сложные и пограничные случаи и превращать их в понятные правила и примеры для инструкции.

Управление командой
Нужно будет распределять нагрузку, следить за соответствием компетенции исполнителей назначаемым заданиям, а также мониторить качество и скорость разметки, работать над её улучшением.

Экспертиза и ревью
Вам предстоит смотреть на материал сразу с двух сторон: корректен ли русский язык и помогает ли это конкретной учебной задаче ребёнка. Вы будете принимать решения, объяснять их разметчикам и влиять на качество продукта в целом.

Мы ждем, что вы

• Работали методистом, преподавателем или редактором образовательного контента
• Отлично знаете русский язык и школьную программу 5–11-го классов
• Понимаете формат ОГЭ и ЕГЭ по русскому языку
• Имеете опыт разметки данных, ревью разметки или контроля качества
• Умеете замечать неоднозначное в заданиях и формулировках
• Готовы принимать решения в спорных случаях и аргументировать их
• Способны объяснять свои решения разметчикам понятно и без конфликтов
• Умеете видеть системные проблемы и превращать их в правила и инструкции
• Внимательны к деталям, но при этом не теряете общую картину
• Готовы работать с большим объёмом контента и соблюдать сроки

Будет плюсом, если вы

• Работали с ИИ-контентом
• Готовили школьников к экзаменам по русскому языку
• Составляли или проверяли экзаменационные задания