Как создать тест по тексту нейросетью и проверить ответы

Чтобы создать тест по своему тексту нейросетью, передайте ей сам материал, задайте число вопросов и вынесите ключ отдельно. Затем сверьте каждый правильный ответ и условия вопроса с исходником. Ниже — полный запрос, собственный бесплатный пример в MostAI и ошибка, которую пришлось исправить вручную.

Какой результат мы готовим

Это инструкция для преподавателя, автора курса или сотрудника, который готовит проверку понимания материала. Результат — текстовый бланк с вариантами ответов и отдельный ключ. Мы не создаём интерактивную форму, не выставляем оценки людям и не проверяем надёжность педагогического измерения.

Если задача — подготовиться самому по всей программе, начните с промтов для экзамена. Если нужны пары «вопрос — ответ» для повторения в Anki, подойдёт инструкция по карточкам. Здесь работаем с другим результатом: проверяемым тестом по одному конкретному источнику.

Сначала подготовьте исходник

Возьмите короткий законченный фрагмент: правило, параграф или собственную инструкцию. Укажите аудиторию и то, что она должна понять. Отделите исходный текст от команды явным заголовком. Уберите персональные данные и сведения, которые нельзя передавать в чат.

В нашем учебном примере мастерская выдумана. В тексте есть время приёма заявок, сверка номера, порядок действий при несовпадении и место для возвращённого инструмента. Такой маленький материал удобно проверять целиком. Тест по нему не заменяет настоящий инструктаж.

Полный запрос из нашего запуска

Откройте чат MostAI, выберите бесплатный ChatGPT и вставьте запрос. В рабочем сценарии замените учебный текст своим. Само составление вопросов не требует отдельного генератора тестов.

Составь проверочный тест только по исходному учебному тексту. Аудитория — новые сотрудники мастерской. Нужно ровно 4 вопроса, у каждого 3 варианта А/Б/В и только один правильный. Не добавляй внешние знания. Вопросы должны проверять четыре разных факта. Сначала весь бланк без ответов, затем отдельный ключ: номер, буква, точная короткая цитата из текста. Не придумывай правила, сроки и причины, которых нет в тексте.

ИСХОДНЫЙ ТЕКСТ:
Учебная мастерская принимает заявки до 15:00. Заявки, пришедшие позже, рассматривают на следующий рабочий день. Перед выдачей инструмента сотрудник сверяет номер заявки с журналом. Если номера не совпадают, выдачу приостанавливают и обращаются к координатору. Возвращённый инструмент кладут на полку «Проверка», а не сразу на рабочее место. Координатор отмечает завершённую проверку в журнале.

В нашем примере бесплатный ChatGPT в MostAI составил четыре вопроса, по три варианта ответа и отдельный ключ с цитатами. Стоимость составления теста — 0 ₽. По одному короткому тексту нельзя судить о точности модели на больших материалах.

Ошибка, которую не исправил даже ключ с цитатой

Четвёртый вопрос модель сформулировала так: «Где кладут возвращённый инструмент после проверки?» В ключе стояла полка «Проверка».

В исходнике порядок другой: возвращённый инструмент сначала кладут на эту полку, а завершение проверки координатор отмечает отдельно. Слова «после проверки» модель добавила сама. Цитата в ключе выглядела подходящей, но не подтверждала всё условие вопроса.

Мы вручную убрали эти слова и исправили грамматику второго вопроса. Ниже приведён бланк с этими ручными исправлениями. Дополнительно можно улучшить неправдоподобные неверные варианты: в исходном ответе некоторые из них слишком легко исключить.

Бланк после ручной правки

1. До какого времени мастерская принимает заявки? А) До 15:00. Б) До 16:00. В) До 14:00.
2. Что сотрудник сверяет перед выдачей инструмента? А) Номер заявки с журналом. Б) Цвет инструмента с заявкой. В) Номер рабочего места с этикеткой.
3. Что делают при несовпадении номеров? А) Продолжают выдачу. Б) Приостанавливают выдачу и обращаются к координатору. В) Отменяют заявку.
4. Куда кладут возвращённый инструмент? А) На полку «Проверка». Б) Сразу на рабочее место. В) В ящик для инструмента.

Ключ: 1 — А, 2 — А, 3 — Б, 4 — А. Неверные варианты во втором вопросе тоже отредактированы нами; в исходнике они не заявлены как допустимые действия. Для реальной проверки стоит также перемешать позиции ответов: здесь три правильных варианта из четырёх стоят под буквой А.

Как проверить тест перед использованием

Если несколько вопросов повторяют один факт, замените один из них вопросом по непокрытой части. Если правильный ответ требует знания за пределами исходника, либо добавьте это знание в материал, либо исключите вопрос. Не просите модель молча «догадаться», что имел в виду автор.

Что делать с большим материалом

Разделите его на смысловые блоки и заранее распределите вопросы по темам. После сборки проверьте повторы и единый уровень сложности. Универсального безопасного числа страниц нет: оно зависит от длины текста, сложности и возможностей выбранной модели.

Текстовый ответ можно вручную перенести в привычную форму или документ. В этом примере перенос и автоматическую проверку ответов мы не испытывали. Для зачёта, аттестации или важных решений вопросы должен проверить ответственный специалист.

Попробуйте на своём коротком тексте

Начните с одного абзаца и четырёх вопросов в MostAI. Сначала добейтесь однозначного бланка и проверенного ключа, затем увеличивайте материал. Полезный результат здесь — вопросы, которые действительно проверяют ваш текст и не меняют его смысл.