Broadcom только что анонсировала набор микросхем искусственного интеллекта, который транслирует аудио в режиме реального времени непосредственно на устройство
Broadcom и компания CAMB. Искусственный интеллект объединяются, чтобы перенести аудиоперевод с устройства на чипсет. Это позволит устройствам, использующим SoC, выполнять задачи перевода, дубляжа и описания звука без необходимости обращаться к облаку. Другими словами, это могло бы значительно улучшить доступность для потребителей.
Компании обещают сверхнизкую задержку и повышенную конфиденциальность, поскольку вся обработка данных будет осуществляться локально на устройстве пользователя. Пропускная способность беспроводной сети также должна быть значительно сокращена. Что касается аудио-описания, то здесь есть демонстрационное видео с использованием инструмента в клипе из фильма «Рататуй». Можно услышать, как искусственный интеллект описывает сцену на разных языках, в дополнение к письменному переводу, появляющемуся на экране. Это выглядит невероятно полезным, особенно для тех, у кого проблемы со зрением.
Есть одно важное предостережение. Это тщательно контролируемый ролик с большим количеством правок. Мы понятия не имеем, как эта технология будет работать в реальных условиях. Кроме того, мы не знаем, насколько точной будет информация. В нем действительно реализована голосовая модель, которая уже используется такими организациями, как NASCAR, Comcast и Eurovision. Компании хвастаются, что это позволит осуществлять «перевод на устройстве более чем на 150 языков». Мы не знаем, когда эти чипы начнут появляться в телевизорах и других гаджетах. Пока технология находится в стадии тестирования, так что потребуется некоторое время. Broadcom также недавно объединилась с OpenAI, чтобы помочь последней компании в производстве собственных чипов.
Эта статья первоначально появилась на Engadget по адресу https://www. engadget. com/ai/broadcom-just-announced-an-ai-chipset-that-translates-audio-in-real-time-directly-on-the-device-050036717. html?src=rss
Другие статьи: