Sakhanda Wire
NVDA $229.28 -0.52% MSFT $535.07 +2.38% GOOGL $351.66 +0.97% META $718.67 -0.31% AMZN $262.43 +3.29%
← Към новините

TII представи Falcon-ASR: арабски модел за разпознаване на реч с 1,6 млрд. параметъра постига 20,92% WER

Технологичният иновационен институт (TII) в Абу Даби представи Falcon-ASR — модел за разпознаване на арабска реч с 1,6 млрд. параметъра. Той е фокусиран върху емирския диалект и също така транскрибира английски, френски, испански и португалски. В оценката на TII Falcon-ASR постига среден процент грешки при думите (WER) от 20,92% в 6 арабски тестови набора. Това е с 2,25 пункта по-добър резултат от най-доброто публикувано представяне в моментната снимка на класацията на TII. За разработчиците, създаващи арабски гласови продукти, уловката е достъпът: днес моделът работи единствено като хоствана демонстрация.

Накратко

  • Размер: 1,6 млрд. параметъра. Максимален аудиоконтекст: не е оповестен (демонстрацията приема клипове до 60 секунди и 20 MB).
  • Работи на: не е оповестено. Не са публикувани тегла или квантизирани варианти. Достъпът е чрез демонстрация в Hugging Face, като са планирани API и нативни приложения.
  • Производителност: най-нисък WER за арабски и емирски в собствените сравнения на TII, със стабилни резултати на английски.
  • Най-добър резултат: 20,92% среден арабски WER, с 2,25 пункта по-нисък от Audar-ASR-V1-Turbo (23,17%).
  • Най-слаб резултат: 11,86% WER на Earnings-22, най-слабия му тестов набор на английски.
  • Извод (най-добрият): компактен модел с 1,6 млрд. параметъра, който изпреварва по-големи арабски системи в тестовете на TII.
  • Извод (най-лошият): все още няма тегла, лиценз или API, а всички резултати са самостоятелно докладвани.

Какво представлява Falcon-ASR?

Falcon-ASR е модел за преобразуване на реч в текст от TII, който преобразува говорим арабски и още 4 езика в текст. И петте езика споделят един набор от тегла. Моделът не се нуждае от флаг за езика и извежда текст на езика, на който се говори. Той също така връща времеви маркери на ниво дума, свързващи всяка дума с позицията ѝ в аудиото. Това е важно за субтитри, търсене в записи и бележки от срещи.

Как Falcon-ASR обработва арабските диалекти?

Диалектният арабски разполага с много по-малко транскрибирани ресурси в сравнение със съвременния стандартен арабски (MSA). TII е обучил Falcon-ASR върху емирски, MSA, други заливни и арабски диалекти, както и английски. Целта е разпознаване на ежедневна реч, включително диалектни форми и превключване между езици.

Аудиозаписите за обучение са били обогатени с фонов шум, припокриваща се реч, музика, реверберация на помещението и ефекти от телефония. Скоростта и височината на тона също са били променяни. Същата обработка е приложена и към емирските записи.

Моделът се основава на работата на TII върху Falcon3-Audio. Това изследване описва аудиоезикови модели, изградени върху LLM, настроени чрез инструкции, и енкодери Whisper, обучени върху по-малко от 30 хил. часа публично аудио. Нашият редакционен и технически екип в Marktechpost не успя да открие публикувани точната архитектура или размера на обучаващите данни на Falcon-ASR.

Как се представя Falcon-ASR на арабските бенчмаркове?

TII е следвал протокола на Open Universal Arabic ASR Leaderboard, поддържана от ELM Research Center. Тя класира системите според среднопретегления с равни тегла WER в 6 тестови набора. TII е използвал фиксираните манифести на класацията. Данните за конкурентите са публикувани средни стойности от класацията, проверени на 30 септември 2026 г.

МоделПараметриСреден WER (%)Среден CER (%)
Falcon-ASR1,6B20,928,79
Audar-ASR-V1-Turbo2,35B23,179,23
Cohere Transcribe Arabic (07-2026)2,0B25,8711,80
omniASR LLM 7B7,0B28,3212,52

По-ниската стойност е по-добра. Имайте предвид, че стойността за Falcon-ASR е от собствен тест на TII, а не от участие в класацията. Картата на модела Audar посочва собствен среден CER от 9,20%.

Как се представя Falcon-ASR при емирска реч?

TII е създал вътрешен емирски и заливен тестов набор от отделени записи с транскрипции, потвърдени от хора. Той допълва подсета за ОАЕ от публичния набор от данни Casablanca.

МоделПараметриWER (%)CER (%)
Falcon-ASR1,6B22,7310,19
Qwen3-Omni-30B-A3B-Instruct30B (3B активни)26,8012,72
Audar-ASR-V1-Turbo2,35B27,8913,75
Cohere Transcribe Arabic2,0B31,0518,07
Qwen3-ASR-1.7B2,0B31,5213,35
Audar-ASR-V1-Flash0,78B32,8715,36

Falcon-ASR води с 4,07 пункта WER пред Qwen3-Omni. Този тестов набор е частен и не може да бъде възпроизведен. Audar отчита 19,4% WER върху различен емирски набор (Mixat), така че резултатите не са пряко сравними.

Колко добър е Falcon-ASR на английски?

В 7-те английски тестови набора, използвани от Hugging Face Open ASR Leaderboard, TII отчита среден WER от 5,74%. Резултатите за отделните набори варират от 1,75% при LibriSpeech clean до 11,86% при Earnings-22. За сравнение, Qwen3-ASR-1.7B посочва среден WER от 5,76% в тази класация. Френският, испанският и португалският се поддържат, но TII не е публикувал резултати за тях.

Сравнение: Falcon-ASR спрямо най-близките арабски ASR модели

ФункцияFalcon-ASRAudar-ASR-V1-TurboCohere Transcribe ArabicQwen3-ASR-1.7B
ОрганизацияTII (ОАЕ)AudarAICohereAlibaba Qwen
Параметри1,6B2,35B2B1,7B (2B в картата на HF)
АрхитектураИзградена върху Falcon3-AudioАудио енкодер + LM декодерFastConformer енкодер + Transformer декодерИзградена върху Qwen3-Omni
ЛицензНе е оповестенAudarAI Community License v1.0Apache 2.0Apache 2.0
Отворени теглаНеДа (BF16, GGUF, W4A16)ДаДа
Езици5 (арабски, включително емирски, EN, FR, ES, PT)30 (с приоритет върху арабския)Арабски, английски30 езика + 22 китайски диалекта
Среден арабски WER (6 набора)20,92 (оценка на TII)23,1725,8733,36 (класация)
Среден арабски CER8,79 (оценка на TII)9,2011,8012,33
Емирски WER според TII22,7327,8931,0531,52
Среден WER на английски (набори Open ASR)5,74 (оценка на TII)Не е оповестенНе е оповестен5,76
Времеви маркериНа ниво думаНе е оповестеноНе е оповестеноЧрез Qwen3-ForcedAligner-0.6B
Работи наНе е оповестено (хоствана демонстрация)CPU, GPU, периферни устройства чрез GGUF; W4A16 на GPU с 12 GB+Не е оповестеноGPU чрез Transformers или vLLM
ДостъпHF демонстрация; API е планиранТегла + Audar APIТегла + Cohere APIТегла + DashScope API

Източници: Данните за Falcon-ASR са от блога на TII. Данните за Audar, Cohere и Qwen в класацията са от класацията на ELM, възпроизведена в картата на Audar. Емирският WER за всички модели е от вътрешната оценка на TII.

Основни изводи

  • Falcon-ASR е арабски ориентиран модел за реч с 1,6 млрд. параметъра от TII, фокусиран върху емирския диалект.
  • Той отчита среден арабски WER от 20,92%, с 2,25 пункта пред Audar-ASR-V1-Turbo.
  • В емирския набор на TII той изпреварва 30B модела Qwen3-Omni с 4,07 пункта WER.
  • Един набор от тегла покрива 5 езика, с времеви маркери на ниво дума.
  • Все още няма тегла, лиценз или API: изпробвайте го чрез демонстрацията с продължителност 60 секунди.

Разгледайте блога за Falcon-ASR, статията за Falcon3-Audio и изпробвайте демонстрацията. Също така не се колебайте да ни последвате в Twitter и не забравяйте да се присъедините към нашия 150k+ ML SubReddit и да се абонирате за нашия бюлетин. Чакайте! В Telegram ли сте? Вече можете да се присъедините към нас и там.

Преведено автоматично от английски. Оригиналната статия е на връзката по-долу.

Първоначално публикувано от MarkTechPost на

Прочетете оригинала в MarkTechPost ↗

Текстът и изображенията са собственост на MarkTechPost и са възпроизведени тук с посочване на авторството и връзка към оригиналната публикация.

← Към новините

Още новини

Всички последни новини