Коксон: Anthropic може перенавчити Mythos із меншими витратами
Колишній дослідник OpenAI та Anthropic Джейкоб Коксон заявив, що слайд із презентації Anthropic для IPO став однією з головних причин його звільнення приблизно через чотири місяці роботи в компанії. На графіку показано, як із часом змінюється обсяг обчислень, потрібний для навчання моделей. Стиснута логарифмічна шкала робить десятикратне та стократне зростання візуально майже подібним, однак крива все одно стрімко піднімається. Коксон вважає це ознакою того, що алгоритмічна ефективність зростає дедалі швидше.
На його думку, модель Anthropic Mythos, яка навесні стала значним стрибком у можливостях, є частиною цієї тенденції, а не поодиноким відхиленням. Коксон стверджує, що компанія вже може повторно навчити Mythos, використавши лише частину початково необхідних обчислювальних ресурсів. Anthropic зазначає, що точки на графіку ґрунтуються на внутрішніх оцінках і наведені лише для ілюстрації.
Коксон також каже, що вдосконалення алгоритмів наближається до автоматизації. Він підтримує паузу в розробці передових моделей наступного року, щоб конкуренти могли надолужити відставання. Раніше Коксон попереджав, що розвинені системи штучного інтелекту, здатні до самовдосконалення, можуть вийти з-під контролю.
Текст підготовлено ШІ Sakhanda Wire за матеріалом The Decoder. Факти, цитати та повний контекст — в оригінальній статті нижче.