Эта статья была опубликована в утреннем журнале 21Шкала 2023
Я открыт для того, что мой метод не является оптимальным, но это не означает, что языковые модели не подходят в качестве помощи в работе цензуры.
На прошлой неделе исследователи Pierre Lison и Samia Touileb выступили в Morgenbladet с настоятельным призывом к коллегам не брать с меня пример и не использовать языковые модели для экономии времени при проверке экзаменационных работ. Безусловно, необходимо критически относиться к технологии и способам её применения, всегда уважать конфиденциальность, академическую добросовестность и возможный сигнальный эффект. Я допускаю, что мой метод не идеален, однако это не означает, что языковые модели непригодны как вспомогательный инструмент при проверке работ.
Я считаю, что оптимальным решением для цензуры в будущем будет сочетание искусственного интеллекта (ИИ) и человеческого интеллекта. Открытость в отношении процессов, связанных с использованием KI, помогает защитить академическую целостность и отправить правильные сигналы будущим студентам.
При цензуре экзаменационной работы в области делового администрирования может иметь смысл использовать калькулятор или другую соответствующую математическую помощь. Аналогичным образом, может иметь смысл использовать соответствующую языковую модель при цензуре задачи, которая в основном содержит текст.
Итан Моллик, профессор Университета Уортона и, возможно, самый современный эксперт в области образования в мире на данный момент, Очень хорошие опыты с использованием KI для обобщения, извлечения соответствующей информации и ответов на вопросы, требующие понимания содержания текста. Это как я использовал КИ в процессе оценки Шкала
Я использовал не Chat GPT, как заголовок в сообщении исследователей в сигналах Morgenbladet, а инструмент под названием Humata, который используется во многих учебных заведениях. Хумата утверждает, что с помощью инструмента можно ИНТЕРНЕТ Учитесь в сотни раз быстрее! Инструмент подчеркивает конфиденциальность, а данные документа не используются для обучения моделей. Все данные, отправленные на или из модели, будут удалены через тридцать дней. Ведущий норвежский эксперт по вопросам конфиденциальности, авторского права и GDPR Вебьорн Сёндерсрод написал в Twitter: «Учитывая, что вы не загрузили имя студента, я не вижу здесь никаких особых проблем с конфиденциальностью. Что касается авторского права, то учебное заведение должно иметь возможность делать копии, необходимые для цензуры, без согласия».
И еще один вопрос, касающийся сигнальных эффектов. То, что студенты прагматичные, не является чем-то новым. Доступ к инструментам KI повысит требования, предъявляемые к студентам в будущем. Студенты уже используют КИ в больших масштабах. Поэтому важно, чтобы участники сектора образования были знакомы с тем, как КИ может влиять на будущее образования. Это делается путем поощрения учителей к изучению инструментов, активно работая над разработкой политики и правил их использования.
Объединив знания о том, как Google определяет качество, информацию, полученную из задач с использованием соответствующих инструментов KI, и традиционную ручную оценку, я считаю, что я сэкономил время и улучшил качество оценки, не ставя под угрозу конфиденциальность или академическую целостность.