Взрослые, готовящиеся к экзамену на получение лицензии, сертификационному тесту или финальному экзамену по курсу, задают, по сути, тот же вопрос, который родитель задаёт о домашнем задании ребёнка: является ли использование ИИ здесь списыванием? Ответ зависит от одного различия, которое легко сформулировать и легко размыть под давлением дедлайна: использование ИИ во время подготовки к экзамену и использование ИИ во время экзамена — совершенно разные категории, регулируемые совершенно разными правилами, и именно со второй связаны реальные академические и профессиональные последствия.
Эта статья проводит границу применительно к экзаменам, которые сдают взрослые, — профессиональные сертификации, экзамены лицензирующих комиссий, университетские курсовые экзамены, домашние экзамены — и даёт рабочий процесс подготовки, который уверенно остаётся на допустимой стороне.
Граница: подготовка против самого оценивания
Допустимо, во время подготовки:
- Генерация тренировочных вопросов из материала, который вы предоставляете (глава учебника, ваши заметки, список тем из программы курса).
- Просьба объяснить, почему тренировочный ответ был неверен.
- Построение интервального графика повторения по темам до даты экзамена.
- Прояснение непонятного вам понятия: ИИ здесь используется так же, как учебное пособие.
Недопустимо, во время самого оценивания:
- Держать инструмент ИИ открытым в любой форме во время прокторируемого экзамена — удалённого или очного — если политика самого экзамена явно не разрешает это.
- Просить ИИ ответить на вопросы домашнего экзамена, который вы сейчас выполняете, даже если никто не наблюдает в реальном времени.
- Использовать ИИ для генерации содержания оцениваемого экзаменационного эссе или развёрнутого ответа в отведённое на оценивание время.
Различие не в том, хорош или плох ИИ для обучения сам по себе. Оно в том, что именно измеряет конкретный экзамен: ваши собственные знания и рассуждения, полученные без посторонней помощи, в этот конкретный момент. Использование ИИ заранее, чтобы построить эти знания, — подготовка. Использование же во время самого измерения подменяет то, что измеряется.
Сначала проверьте реальные правила — решать наугад здесь не вам
Прежде чем предполагать, что что-либо разрешено, проверьте заявленную политику конкретного экзамена — правила экзамена, установленные сертифицирующим органом, политику академической честности университета или регламент тестирования лицензирующей комиссии. Некоторые органы теперь называют ИИ напрямую. Соглашение кандидата CompTIA перечисляет «utilizing any artificial intelligence (AI) software, program, or application in any way during the examination» среди запрещённого поведения, а раздел о нарушениях устанавливает санкции, включая отзыв сертификата по этому экзамену, отзыв всех остальных сертификатов CompTIA, которые уже есть у кандидата, и запрет регистрироваться на любой экзамен CompTIA или получать любой сертификат CompTIA в течение как минимум шести календарных месяцев (CompTIA Candidate Agreement). Читайте правила своего экзамена, а не переносите на него этот единственный пример — условия у разных органов различаются, — но читайте их, ожидая последствий, которые не закончатся одной плохой оценкой.
Если в правилах об ИИ ничего не сказано, это не разрешение: спросите напрямую проктора, тестовый центр или администратора программы, а не додумывайте. Тот же принцип, что и в дереве решений по домашнему заданию, действует в любом возрасте: решает заявленное правило учреждения, а не ваше собственное представление о том, что кажется разумным.
Постройте рабочий процесс с тренировочными вопросами, который остаётся на правильной стороне
Самая полезная допустимая роль ИИ в подготовке к экзамену — генерация неограниченного числа тренировочных вопросов из материала, которому вы уже доверяете, а не из общего представления модели о предмете: на узкоспециальном материале велик риск фактических искажений.
Вот исходный материал по теме моего экзамена: [paste the excerpt you need, not the whole book].
Используя только этот источник, сгенерируйте 10 тренировочных вопросов, охватывающих диапазон сложности, которого мне стоит ожидать.
Пока не давайте ответы.
После того как я отвечу, оцените каждый ответ по источнику, а для всего, что я ответил неверно, процитируйте конкретный отрывок, объясняющий правильный ответ.
Отвечайте с закрытым источником. Это даёт тот же эффект практики извлечения (retrieval practice), описанный в статье Наука об обучении с ИИ: модель генерирует вопросы и проверяет ответы по источнику, а собственно извлечение из памяти выполняете вы. Это разделение важно, потому что именно извлечение влияет на удержание в памяти: в экспериментах прохождение теста на память улучшало последующее запоминание сильнее, чем ещё один заход на повторное изучение материала (Roediger и Karpicke, 2006), а широкий обзор учебных техник высоко оценил практическое тестирование в самых разных условиях (Dunlosky и коллеги, 2013).
Не просите модель предсказать или составить вероятные вопросы и ответы, скопированные из настоящего банка вопросов, прав на который у вас нет, и никогда не просите её воспроизвести реальные вопросы действующего экзамена, если вы каким-то образом увидели их заранее: это переход от учебной помощи к другому, более серьёзному нарушению академической честности — независимо от того, какой инструмент при этом используется.
У совета «вставьте исходный материал» есть сторона, связанная с авторским правом и конфиденциальностью, и её легко упустить. Учебники, лицензированные материалы подготовительных курсов и официальные учебные пособия — чья-то работа, защищённая авторским правом, и загрузка существенных их частей в потребительский ИИ-инструмент может нарушить и лицензионные условия издателя, и условия самого инструмента: права на воспроизведение принадлежат правообладателю по законодательству ЕС (Директива 2001/29/EC, статья 2). Вставляйте конкретные абзацы или план темы, над которой работаете, а не целые главы, и предпочитайте в качестве источника собственные заметки, если они достаточно хороши. Отдельная история — сами экзаменационные материалы: они обычно конфиденциальны по договору. Соглашение CompTIA запрещает раскрывать или воспроизводить любую их часть, а это включает и набранный по памяти вопрос в окне чата. Если вы готовитесь к сертификации за счёт работодателя, проверьте, не помечены ли выданные вам внутренние учебные материалы как конфиденциальные, прежде чем они покинут ваш компьютер.
Где границу переходят
Рассмотрим иллюстративный случай. Парамедик, готовящаяся к национальному сертификационному экзамену, использует ИИ, чтобы генерировать тренировочные сценарии из официального плана содержания экзамена, который публикует сертифицирующий орган, и отвечает на каждый без помощи, прежде чем свериться. За две недели до экзамена у неё возникает соблазн вставить в чат-инструмент полученное от друга описание сценария с прошлогоднего реального экзамена и спросить вероятный правильный ответ. Здесь граница уже перейдена — не потому, что задействован ИИ, а потому, что это попытка восстановить и отрепетировать содержание действующего экзамена, а не выстроить общую компетентность в сертифицируемом навыке. Соглашения кандидатов обычно запрещают воспроизводить экзаменационные материалы и делиться ими в любой форме, с ИИ или без него, и обязательство обычно работает в обе стороны: некоторые ещё и требуют от кандидата сообщить о том, что он столкнулся с утёкшими экзаменационными материалами, а не тихо ими пользоваться.
Разные форматы экзамена требуют разной подготовки, а не разных правил
Различие «допустимо / недопустимо» сохраняется для всех форматов, но рабочий процесс подготовки немного меняется:
- Множественный выбор. Сгенерированные ИИ отвлекающие варианты полезны для тренировки, но проверяйте, не окажется ли «неправильный» вариант случайно верным при другом прочтении: модель способна выдать правдоподобный дистрактор, который технически можно защитить.
- Развёрнутый ответ или эссе. Тренируйтесь писать полные ответы на время и без помощи, а ИИ используйте только потом — чтобы сверить ваш ответ с критериями оценивания или исходным материалом, но никогда для написания самого тренировочного ответа: это сводит на нет весь смысл отработки навыка, который экзамен и измеряет.
- Устные или практические экзамены. Чат-инструмент не воспроизведёт давление живого уточняющего вопроса экзаменатора или задание, которое надо выполнить руками. Для этого формата тренируйтесь с партнёром по учёбе или преподавателем; ИИ здесь полезнее для предварительного повторения материала, чем для репетиции самого формата.
Заметка о разрешённых инструментах во время самого экзамена
Некоторые экзамены прямо разрешают калькулятор, лист с формулами или конкретные справочные материалы во время оценивания. Это разрешение действует только для инструментов, названных в правилах, и не распространяется на универсального ИИ-ассистента, если это прямо не оговорено. Если вы не уверены, покрывает ли разрешение на «справочные материалы» ИИ-инструмент в какой-либо форме, спросите до экзамена, а не во время него.
Чего ИИ не может сказать вам о вашем экзамене
ИИ не знает, какие конкретные вопросы появятся на вашем экзамене, не может гарантировать, что вы сдадите, и на узкоспециальном или регионально специфичном материале (отдельные нормы, отдельные клинические протоколы, право конкретной юрисдикции) способен выдать правдоподобно звучащие тренировочные вопросы или объяснения, которые незаметно ошибочны. Всё важное сверяйте с официальными учебными материалами или первоисточником, прежде чем принять это за экзаменационно точное, — особенно близко к дате экзамена, когда времени поймать ошибку уже не остаётся.
Если ставки на вашем экзамене высоки (лицензирование, сертификация профессиональной коллегии, адвокатский или медицинский экзамен), относитесь к любому сгенерированному ИИ тренировочному материалу как к дополнению к официальному плану содержания и материалам в формате прошлых экзаменационных работ, которые публикует сам сертифицирующий орган, а не как к их замене. Именно план сертифицирующего органа — подлинный источник истины о том, что будут проверять.
Перед днём экзамена
Возьмите официальный план содержания экзамена или список тем программы. Сгенерируйте по нему один набор тренировочных вопросов приведённым выше промптом с опорой на источник, ответьте без помощи и проверьте, как правила вашего экзамена относятся к использованию ИИ во время самого оценивания, — до дня экзамена, а не утром того же дня. Рабочий лист академической честности при подготовке к экзамену для взрослых даёт место для того, чтобы зафиксировать проверенные правила, ваши тренировочные сессии и темы, которые ещё требуют повторения.
