Modulate привлекла $25 млн на свои голосовые модели и аналитический пакет

Базирующийся в Бостоне стартап в области голосового интеллекта Modulate привлек $25 млн нового финансирования для своей платформы, которая использует набор небольших моделей, чтобы предлагать компаниям транскрибацию, эмоциональный анализ, обнаружение дипфейков и музыки, созданной ИИ, а также контроль соблюдения правил голосовыми агентами в регулируемых отраслях.

Это финансирование продолжает популярную среди инвесторов тенденцию в растущей индустрии голосового ИИ: поддержку компаний, которые пытаются сделать голоса, созданные ИИ, более похожими на человеческие.

Компания также конкурирует с другими фирмами, пытающимися определить намерения участников человеческого разговора путем его анализа, а также с теми, кто стремится защитить людей и компании от дипфейк-звонков, поскольку сегодня клонировать голоса стало легко.

Новый раунд финансирования Modulate возглавила Future Ventures при участии Hyperplane и Lakestar. Согласно данным PitchBook, до этого раунда стартап привлек $41 млн при оценке в $170 млн.

Стартап основали в 2017 году Майк Паппас и Картер Хаффман, познакомившиеся во время учебы на бакалавриате по физике в MIT. На первых этапах компания сосредоточилась на предоставлении услуг по изменению голоса для игр. Однако позже она начала концентрироваться на инструменте модерации на основе голоса.

С появлением голосовых моделей ИИ компания теперь сосредоточена на обнаружении различных видов генерации аудио с помощью ИИ и анализе намерений, стоящих за словами человека.

«Наше понимание рынка голосового ИИ заключается в том, что многие занимаются транскрибацией, но практически нет решений, способных уловить все нюансы и полностью понять разговор, что крайне важно, когда вы разговариваете с другим человеком», — сказал Хаффман в разговоре с TechCrunch.

Сегодня компания использует более 100 моделей, которые в основном разделены на две категории: модели извлечения сигналов, предназначенные для понимания вокальных эмоций, тона, языка и определения синтетического голоса; и модели анализа и обнаружения, которые определяют намерения — например, что пытается сказать клиент, нарушает ли звонящий правила или пытается ли он обмануть получателя.

Хаффман отметил, что благодаря использованию небольших моделей компании не нужны специализированное оборудование и огромные вычислительные мощности, что может оказаться особенно важным при росте счетов за токены. Кроме того, компании проще обучать модели с новыми возможностями, добавлять их в общий набор и поручать оркестратору вызывать их при необходимости.

У Modulate разнообразная клиентская база, однако компания специализируется на обнаружении дипфейков и предупреждении организаций, например кол-центров, о возможном мошенничестве. Она также отслеживает, как ИИ-агенты отвечают клиентам, чтобы оценивать качество звонков, и проверяет соблюдение ИИ правил соответствия требованиям в регулируемых сферах. Благодаря этим продуктам Modulate часто работает рядом с используемым компанией голосовым стеком, анализируя звонки.

По мере того как все больше компаний внедряют обслуживание клиентов с помощью ИИ, им становится важно понимать, почему звонок клиента оказался успешным или неудачным. В таком случае оценка намерений и реакции клиентов становится критически важной и выходит за рамки базового анализа. Хаффман сказал, что Modulate может предоставлять компаниям подробные данные в этой области.

«Я думаю, когда компании говорят об анализе эмоций, они считают, что если клиент был нейтрален или настроен позитивно, звонок прошел успешно, а если клиент был настроен негативно, звонок оказался неудачным. Но на самом деле люди часто могут быть вежливы даже с ИИ-агентами или ботами. Верно? Они не будут выглядеть рассерженными, но при этом будут очень недовольны», — сказал он.

Компания заявила, что ее технологии также используются для мониторинга кибератак через голосовые звонки.

Сейчас в стартапе работает 40–45 сотрудников, и в ближайшие месяцы компания планирует нанять еще 10 человек для расширения работы над созданием моделей. В настоящее время Modulate работает над расширением возможностей развертывания своих решений локально и непосредственно на устройствах для повышения уровня конфиденциальности.