Block представила голосовой ИИ Dessa, работающий локально на ноутбуке
Компания Block представила свою новую модель голосового искусственного интеллекта под названием Dessa. Эта модель обладает ключевой функцией full-duplex, что означает, что она способна одновременно слушать собеседника и говорить в ответ. Это отличает её от традиционных систем, где диалог разбивается на последовательность голосовых заметок.
Особенность Dessa заключается в том, что её вход и выход — это чистый голос, а не транскрипция текста. Это позволяет модели лучше улавливать нюансы и голосовые сигналы, которые придают разговору естественность. Block утверждает, что модель обучалась с нуля, используя исключительно записи человеческих разговоров, без привлечения предварительно обученных текстовых данных.
Помимо способности к двусторонней связи, Dessa демонстрирует высокую интерактивность. Она может корректно обрабатывать паузы, прерывания и краткие подтверждения, которые люди используют в процессе беседы. Это не просто косметический эффект, а важный признак того, что голосовой помощник понимает динамику диалога.
Что касается производительности, Block заявляет, что Dessa, обученная на одном сервере Nvidia GB200 NVL72, может работать быстрее, чем в реальном времени на устройствах, таких как MacBook Pro с чипом M4 Max или лучше. Это критически важно, поскольку локальная работа модели снижает зависимость от удаленных серверов.
Важно отметить, что на данный момент Dessa не является публичным приложением или встроенной функцией Cash App. Однако Block уже предоставляет ограниченный ранний доступ исследователям по безопасности ИИ, демонстрируя потенциал этой технологии для будущих разработок.