Amazon, когда-то онлайн-книжный магазин, уничтожает редкие книги, чтобы обучать модели ИИ

Amazon скупает огромное количество редких книг, срезает у них корешки и сканирует их для обучения ИИ, сообщает 404 Media, журналисты которого поместили устройство слежения в редкую книгу, в итоге прибывшую на объект Amazon в Лас-Вегасе.

Объект, известный как VGT3, обозначает себя символом динозавра, держащего книгу в когтях. Amazon заявила 404 Media, что «покупает книги через коммерческие каналы, чтобы улучшать продукты и услуги, которыми пользуются клиенты».

Таким компаниям, как Amazon, нужны немыслимо огромные объёмы текста для обучения больших языковых моделей, которые уже поглотили всё, что могли, из интернета (а в случае Anthropic — незаконно пиратские книги). Редкие книги, особенно те, что больше не издаются или которые невозможно найти в интернете, предлагают новый источник ценнейших обучающих данных.

Эти тексты особенно ценны, поскольку нет вероятности, что что-либо опубликованное до 2022 года было написано большой языковой моделью. Когда большие языковые модели обучаются на текстах, созданных ИИ, возникает риск «коллапса модели», который может произойти, когда качество результатов работы большой языковой модели ухудшается после поглощения слишком большого количества текста, созданного ИИ.