Sakhanda Wire
NVDA $155.46 -0.44% MSFT $506.24 -2.27% GOOGL $280.20 -1.24% META $618.87 -1.20% AMZN $257.89 +0.05%
← До новин

TutorMoments оцінює, коли ШІ-репетитору варто допомогти

TutorMoments — це система для перевірки того, чи вміють мовні моделі обирати між допомогою учневі та заохоченням самостійно виконати більшу частину міркувань. Вона базується на 462 знеособлених текстових розшифровках індивідуальних занять з математики у США для учнів 2–7 класів. Досвідчені вчителі позначили понад 1500 ключових моментів і визначили, чи потребував кожен із них спрощення завдання, чи, навпаки, більшої вимогливості до міркувань.

У кожному такому моменті модель на п’ять реплік перебирає роль репетитора, а інша мовна модель грає учня. Оцінювання визначає, чи надала система потрібну підтримку, чи спонукала до складнішого мислення, коли учень був готовий, і чи не зменшила складність надмірно. У попередньому тестуванні семи LLM підказка, яка прямо описувала цей вибір, підвищила показники кожної моделі порівняно із загальною вказівкою «добре навчати». Водночас результати моделей істотно різнилися.

Розробники наголошують, що показники описують поведінку в симульованих сесіях, а не навчальні результати реальних дітей. Набір даних переважно охоплює математику для молодших і середніх класів у США. Для відтворення дослідження оприлюднено знеособлені розшифровки, код і створені моделями продовження сесій.

Текст підготовлено ШІ Sakhanda Wire за матеріалом Hugging Face. Факти, цитати та повний контекст — в оригінальній статті нижче.

Вперше опубліковано виданням Hugging Face

Читати оригінал на Hugging Face ↗

Репортаж і зображення належать Hugging Face і зазначені вище з посиланням на оригінал; текст на цій сторінці — власний виклад Sakhanda Wire.

← До новин

Ще новини

Усі останні новини