Я с помощью инспектора с 50 экзаменов.

Весною 2023 року я використав ШІ як інструмент, коли оцінив approx. 50 завдань студентів на 30-60 сторінках на сторінку. задача.

Інші датчики заздалегідь виявили, що вони витратили від 30-60 хвилин для оцінки завдання або до 50 годин на всі завдання.

Використовуючи ШІ, я підрахував, що можу зменшити час оцінювання на одну проблему до середньої до 15 хвилин. Погані завдання вимагали менше часу. Гарні завдання, які я віддавав набагато довше! Я б сказав, що використання ШІ в процесі оцінки збільшило якість і призвело до більш справедливої оцінки для студентів.

Ось історія про те, як я пішов вперед:

А. Знайти правильну програму для комп' ютерного гравця

Я витратив багато часу, шукаючи потрібні інструменти для штучного інтелекту, щоб цензурувати учнівські завдання.

Він щотижня з'являється нові додатки, і знайти гарну альтернативу було важко. Нарешті я знайшов ГуматаCity in Italy, ChatGPT для документів. Службу розроблено колишнім студентом Стенфорду, який використовується навчальними закладами по цілому світі. Умата стверджує, що за допомогою цього інструменту можна зробити дослідження і дізнатися в 100 разів швидше! Умата-одинець і документ не використовуються для тренувань моделей. Всі дані, надіслані з моделі, буде вилучено через 30 днів.

У Хуматі я можу завантажити документи і поговорити з документами. Хоча це зайняло час, щоб навчитися ефективно користуватися інструментом, це, безумовно, варте того, коли я можу оцінити проблему 10-15 хвилин, в порівнянні з мінімальним 30-60 хвилинами на проблему вручну!

Б. Визначити основні сигнали якості і оцінити загальні

Перш ніж я почав використовувати ШІ в процесі цензури, мені було надіслано завдання, яке декілька сенсорів вважали незалежними від інших на А. Я проаналізував А-задачу, щоб визначити сигнал якості. Ідея полягала в тому, що я можу використати ці якісні сигнали, щоб оцінити проблеми, що залишилися. (Я думав, що в цей момент можу дати "А" для всіх проблем, які виглядали як проблеми А).

Під час підготовки до роботи я отримав багато цінного з досвіду та досвіду в оптимізації пошукової системи (SEO). Принципи оптимізації системи пошуку можна використати як початкову точку для визначення якості будь - якого документа, у тому числі для підкорення студентам.

Добре структурований і добре організований документ з відповідними заголовками, відповідними ключовими словами та іншими якісними сигналами, допомагає читачеві зрозуміти зміст документа, таким чином збільшує ймовірність того, що підкорення буде надано вищим символом.

Так само як веб - сайт повинен бути оптимізованим до високої оцінки пошукових рушіїв, а також підпорядкованості студенту слід робити так, щоб він міг чітко і ефективно спілкуватися з читачем (вчителем або сенсором).

Коли ви переглядаєте довгий документ, то відразу помічаєте якість, розглядаючи вміст проти якісних сигналів.

Можна маніпулювати сенсором, пристосовуючи його до відомих сигналів якості. Я порівнюю цю маніпуляцію (або вплив) з тим, як компанії працюють, щоб покращити місцезнаходження в Google. Якщо всі студенти знатимуть про ці сигнали, то по всьому світі вони побільшать якість запланованих завдань і збережуть сенсори.

Я також рекомендую усім познайомитися. Принцип піраміди А також про добру структуру та спілкування.

Тож, на використання комп'ютера!

К. Задавати питання документа за допомогою комп' ютера

Визначаючи основні сигнали якості та аналізуючи всі документи, шлях до "чатки" з документами.

На початку я сподівався, що правильний інструмент ШІ зробить всю роботу для мене, тобто. Розглянемо проблеми і зведіть до мене оцінки, наприклад, "за умовами оцінки і набором завдань, який персонаж я маю дати завдання?"

Я була абсолютно неправа!

Все не так просто.

Я запитав Умату причини, чому варто допомогти написати добрі пропозиції:

"Привіт. Я тестую Хумату. Ви завантажили 48 звітів, написаних студентами. Я думаю использовать Хумату, чтобы полить качество отчетов. Чи є у вас якісь відсказки на запрошення, які я можу запитати, щоб отримати короткий огляд якості звітів? "

Я отримав таку відповідь:

"Привіт Карл, це роман і творче використання. У меня нет никаких улик, чтобы оценить обчисление, чтобы набрать обширного момента. Хоча було б чудово полити папери на одній підставі. Якщо є певний критерій для оцінювання, то ви можете запитати його про це. Наприклад, "Чи має ця газета експресін Х відносно Y?"

Наприклад, чи учень обговорює роль [X] у формуванні Y і дає підстави для підтвердження свого висновку?"

Тоді я поставив йому наступне запитання:

"Я хочу зробити наступне: Вивантажити студентське підкорення, яке вважається а-а," якісні якості на основі критеріїв оцінки за допомогою людських оцінок

Я хотів би використати ще два градуси.

Чи це потенційний випадок використання для Хумати?"

Я отримав таку відповідь:

"Привіт Карл, так, це потенційне і дуже творче використання для режиму аналізу мультидокументів."

Мег:

"Чи можете висмоктувати кілька повідомлень, які можуть бути використані для тестування цього?"

Відповідь:

"Тому що це такий новий випадок використання я не маю ніяких часткових мотивів, які приходять на думку. Якщо у вас є критерії, які ви використовували для дезінфікування паперу "А," то барлог, у якому ви можете перетворити ці критерії на питання, у яких ви могли б задати інші документи. Це перше, що слід взяти до уваги.

Ще одна експериментальна стратегія - попросити Умату створити запрошення, яке б вам дала критійська. Хоча я б і був третій ретельно з цим напрямком."

Я проверял много образцов до того, как наводка из "Уматы Грюндер" повела меня в правильном направлении.

Я прочитал критерии оценки для экзамена, а потом пытался превратить ключевые критерии в обыденные пропускные.

Це був досвід для мене.

Я проверяла разные образцы.

Наприклад, критерій:

"Використовуй навчальну програму і те, що ти дізнався під час відпустки"

Я повернувся до:

"Студент використовував такий синебус: Іверен, Аалтон, Ганлон, Фуру"

На це запрошення було досить легко відповісти, і я здивувався, коли Хумата не відповіла правильно. Коли я запитав Умату про причину, мені сказали, що модель ШІ має мати змогу відповідати точно на запрошення, але система розвивається і вони поліпшать модель на основі мого вводу.

Потім я відчув, що Хумата добре працює, щоб витягти з документів необхідні екстракти, які я можу отримати на своїх випускних.

Я навіть відчував, що чим краще завдання, тим ліпше, тим легше дама зможе відповісти! Для засновника "Умати" це не було несподіванкою:

"Краще підкорення краще буде виконуватися з Humata, тому що з письма є більше контексту, щоб отримати його."

Я був на спостереженні! Я написав 7 запитів, які стосувалися різних частин підкорення. На кожне підкорення я використовував ті самі запрошення. Я систематично переглядав кожну проблему, перечитував тексти і таким чином отримував хороший огляд подання. Завдяки цьому було легше порівнювати документи з іншими!

Д. Ручне оцінювання

Після того як він оцінив повноту документів і використав " Гумату ," щоб оцінити різні професійні частини завдання, було проведено ручне обговорення обмеженої частини тексту. Читання тексту швидко допомагає вам уявити стиль тексту в кінці документа. У цьому розділі йдеться про визначення загального потоку інформації мовою студента.

Наступний крок

ШІ, безперечно, захоплює, коли йдеться про оцінки завдань учнів. За допомогою правого інструменту комп' ютерного гравця і набору базових сигналів якості ви можете швидко оцінити якість документів за допомогою комп' ютерного гравця для видобування даних з комп' ютерного гравця.

Об'єднання комп'ютерних програм та ручна оцінка можуть зменшити час і зусилля, необхідні для виправлення великої кількості завдань, роблячи це ефективнішим як для студентів, так і для вчителів. Давайте продовжимо досліджувати, як ШІ може використовуватись в освіті для максимізації вигод, поки мінімізується обмеження.

Газетні статті про це:

• Ось так він цензурував 50 іспитів за допомогою штучного інтелекту. (Хроно, 28). 2023 червня)
• Лідери- сенсори з відгуками на іспити комп' ютерного гравця (ВВГ, 27). 2023 червня)

Незаперечним: коли я почав робити оцінку, я вирішив не перейматися студентами, які використовують ШІ для написання проблем. Я також розумію, що використання комп'ютерної програми для сенсації завдань може бути спірним, але я вважаю, що якість оцінки стає кращою!

PS. Цю статтю написав я, але для покращення деяких речень я використовував ChatGPT;)