AnnotationPrep

Как мы пишем вопросы

Что мы делаем, чего не делаем и почему вам всё равно нужно читать актуальные руководства каждой платформы.

Коротко

Каждый вопрос на AnnotationPrep оригинален. Сценарии разработаны так, чтобы отражать типичные ошибки, на которых спотыкаются кандидаты — скрытые галлюцинации, пропущенные негативные ограничения, ошибки в цепочках рассуждений (chain-of-thought), баги на граничных случаях и неатомарные критерии рубрик — без копирования закрытых тестов платформ.

Как создаётся вопрос

  1. Только оригинальные сценарии. Каждый промпт, сравнение Модели A/B, фрагмент кода и пункт рубрики пишутся с нуля.
  2. Чёткий принцип оценки. В каждом ответе указано конкретное правило оценки, принцип отладки или стандарт проверки, на котором он основан.
  3. Проверка формата и однозначности. Каждый вопрос проверяется на наличие одного недвусмысленного лучшего ответа и чётко различимых дистракторов.
  4. Техническая и математическая проверка. Граничные случаи в коде, оценки сложности и математические доказательства проверяются независимо.
  5. Независимая повторная проверка. Ответы и обоснования сверяются с указанным принципом оценки.
  6. Сообщения сообщества. Сообщения, отправленные через «Сообщить о проблеме в вопросе», быстро рассматриваются и исправляются. См. Исправления.

Чего мы не делаем

Почему руководства платформы всегда на первом месте

У каждой платформы AI-тренинга и каждого отдельного проекта есть собственный стайл-гайд, иерархия приоритетов (например, Правдивость против Следования инструкциям) и правила форматирования.

Используйте AnnotationPrep, чтобы натренировать глаз на поиск ошибок и развить скорость, а перед нажатием кнопки «Отправить» внимательно прочитайте актуальные инструкции на платформе.

Если вы нашли ошибку

Нажмите «Сообщить о проблеме с вопросом» под любым вопросом или напишите на support@annotationprep.com. На странице Исправления рассказано, что будет дальше.