Broadcom у співпраці зі стартапом CAMB.AI збирається створити новий чипсет із вбудованими можливостями штучного інтелекту, який може перекладати аудіо в реальному часі без підключення до інтернету.
Як повідомляє Engadget, це рішення дає можливість виконувати переклад і дубляж без звернення до хмарних серверів, тобто вся обробка відбувається локально на пристрої користувача.
Такий підхід не лише зменшує затримку у відтворенні перекладу, а й підвищує конфіденційність, адже аудіо не передається за межі пристрою.
Крім того, компанії зазначають, що використання локальної обробки знижує навантаження на бездротові мережі, що особливо актуально для мобільних і портативних рішень.
Під час демонстрації Broadcom показала, як ШІ-система описує сцену з мультфільму «Рататуй» різними мовами, а на екрані одночасно відображається письмовий переклад. Такі можливості можуть бути корисними для користувачів із порушеннями зору або слуху, а також для освітніх і мовних застосунків.
Технологія базується на мультиголосовій моделі CAMB.AI, яку вже використовують NASCAR, Comcast та Eurovision для синхронного дубляжу та багатомовних трансляцій.
Система підтримує понад 150 мов, що робить її однією з наймасштабніших серед офлайн-рішень у цій сфері.
Поки компанії не розкривають, коли новий чипсет з’явиться в комерційних пристроях, зокрема телевізорах, колонках або смартфонах. Також невідомо, якою буде точність перекладу у реальних умовах, однак Broadcom зазначає, що метою є створення повністю автономного мовного перекладача нового покоління.
Читайте також: OpenAI і Broadcom уклали багатомільярдну угоду на розроблення власних ШІ-чипів.
Підписуйтеся на ProIT у Telegram, щоб не пропустити жодної публікації!
