Mistral AI представила предварительную версию Mistral Large 4
Mistral AI выпустила Mistral Large 4, известную внутри компании как «Le Chonk», в формате публичного предварительного доступа. Модель Mixture of Experts включает 1,05 триллиона параметров, при этом для обработки каждого токена активируются 49 миллиардов. Она принимает изображения напрямую благодаря зрительному энкодеру на 1,6 миллиарда параметров и поддерживает контекст длиной до 1 миллиона токенов.