Modulate привлекла $25 млн на голосовые модели для анализа разговоров и выявления дипфейков

Бостонский стартап Modulate, работающий в сфере голосового интеллекта, привлек $25 млн новых инвестиций. Об этом сообщило издание TechCrunch. Компания развивает платформу, которая с помощью набора небольших моделей предлагает корпоративным клиентам транскрипцию, анализ эмоций, обнаружение дипфейков и сгенерированной ИИ музыки, а также контроль соблюдения правил для голосовых агентов в регулируемых отраслях.

Раунд возглавил фонд Future Ventures, к нему присоединились Hyperplane и Lakestar. По данным PitchBook, до этого раунда стартап привлек $41 млн при оценке $170 млн.

Чем занимается Modulate

Компания основана в 2017 году Майком Паппасом и Картером Хаффманом, которые познакомились на физическом факультете MIT. В первые годы Modulate занималась модуляцией голоса для игр, затем переключилась на инструмент модерации на основе голоса. С распространением голосовых ИИ-моделей компания сосредоточилась на обнаружении различных видов сгенерированного аудио и анализе намерений говорящего.

Сегодня Modulate использует более 100 моделей, которые делятся на две основные категории:

• модели извлечения сигналов — понимают вокальные эмоции, тон, язык и определяют синтетический голос;
• модели анализа и обнаружения — оценивают намерения: что пытается сказать клиент, нарушает ли звонящий правила и не пытается ли он обмануть собеседника.

По словам Хаффмана, поскольку компания использует небольшие модели, ей не требуется специализированное оборудование и большие вычислительные ресурсы, что может быть важно при росте стоимости токенов. Кроме того, компании проще обучать модели с новыми возможностями, добавлять их в набор и вызывать через оркестратор по мере необходимости.

Клиенты и сценарии применения

База клиентов Modulate разнообразна, но компания специализируется на обнаружении дипфейков и предупреждении организаций, например колл-центров, о возможном мошенничестве. Платформа также отслеживает, как ИИ-агенты отвечают клиентам, чтобы оценивать качество звонков и следить за соблюдением нормативных требований. Из-за этого Modulate часто работает рядом с голосовым стеком, который использует компания, и просто анализирует звонки.

По мере того как предприятия все активнее внедряют ИИ в обслуживание клиентов, им становится важно понимать, почему звонок оказался успешным или неудачным. В этом случае оценка намерений и реакции клиента выходит за рамки базовой аналитики. Хаффман отметил, что Modulate может предоставлять компаниям детализированные данные об этом.

«Когда компании думают об анализе эмоций, они считают, что если клиент был нейтральным или позитивным, звонок удался, а если негативным — провалился. Но на самом деле люди часто вежливы даже с ИИ-агентами или ботами. Они не выглядят раздраженными, но при этом очень недовольны», — сказал Хаффман в разговоре с TechCrunch.

Компания также заявляет, что ее технологии используются для мониторинга кибератак через голосовые звонки.

Команда и планы

Сейчас в Modulate работают 40–45 сотрудников. В ближайшие месяцы компания планирует нанять еще около 10 человек для усиления работы над моделями. Кроме того, Modulate работает над расширением возможностей развертывания на собственных серверах и на устройствах для повышения приватности.

Что это значит

Новый раунд показывает, что инвесторы продолжают вкладываться в голосовой ИИ — как в технологии, делающие синтетические голоса более естественными, так и в инструменты защиты от поддельных звонков и анализа разговоров. Modulate занимает нишу между этими направлениями: компания не создает голоса, а анализирует их и помогает выявлять мошенничество и нарушения. Насколько востребованным окажется такой подход у корпоративных клиентов, покажет развитие продуктов и клиентской базы стартапа.