Революція в аудіотехнологіях: Qualcomm презентує чип Snapdragon Sound Elite Gen 2 для персональних AI-пристроїв

Мауї, Гаваї — Інженери представили унікальний аудіочіп на базі штучного інтелекту (ШІ) для портативних пристроїв. Розробники стверджують, що він дозволить користувачам взаємодіяти з віртуальними асистентами без постійного підключення до смартфона. Пристрої з новим чіпом також зможуть збирати аудіо- і навіть відеодані з навколишнього середовища для покращення роботи цих агентів.

На відміну від сучасних навушників, пристрої з новим чіпом зможуть запускати застосунки безпосередньо з власної пам’яті, без потреби в постійному з’єднанні зі смартфоном. Також вони зможуть синхронізуватися з хмарними сервісами, як-от ChatGPT, за наявності Wi-Fi. Практично, чип дозволить користувачам формулювати голосові запити та команди, а модель ШІ виконуватиме дії, наприклад, створювати події в онлайн-календарі чи здійснювати покупки в інтернеті. На відміну від існуючих рішень, це буде можливо без участі смартфона.

Можливості чипа та принципи його роботи

Для користувачів, які бажають підключати свої аудіопристрої до смартфона або комп’ютера (наприклад, для взаємодії з візуальним інтерфейсом), новий чип використовує спеціалізований компонент для встановлення з’єднання через Wi-Fi з низьким енергоспоживанням поряд з Bluetooth. Ця технологія, завдяки архітектурним покращенням на рівні чипа, споживає значно менше енергії, ніж стандартний Wi-Fi, хоча й дещо збільшує затримку та знижує пікову швидкість. Проте для аудіопристроїв використання Wi-Fi замість Bluetooth зазвичай покращує якість відтворення, оскільки Bluetooth стискає дані під час передачі, зазначають представники Qualcomm.

Адаптивне та вибіркове активне шумозаглушення також дозволить користувачам фільтрувати звуки за командою. Наприклад, воно дасть змогу чути важливі звуки, як-от сирени екстрених служб, під час руху містом, або виділяти голоси співрозмовників, блокуючи весь інший шум. Це шумозаглушення реалізовано за допомогою стандартних алгоритмів машинного навчання, а не великих мовних моделей на основі трансформерів, які використовуються в системах ШІ, як-от ChatGPT.

Представники Qualcomm також наголосили на функції “завжди активного інтелекту” (always-on intelligence), де вбудований прискорювач ШІ eNPU забезпечує роботу віртуальних асистентів, транскрипцію та переклад, а також формування “контекстної обізнаності”. Завдяки контекстній обізнаності система постійно відстежуватиме оточення користувача, збираючи дані для створення персонального профілю, що, за словами представників, допоможе їй краще відповідати на майбутні запити.

Хоча система орієнтована на аудіо, вона також розроблена для взаємодії з апаратним забезпеченням, що включає сенсори та камери, наприклад, навушники з вбудованими об’єктивами, які пасивно записуватимуть відео користувача протягом дня. Це частина процесу збору даних для формування контекстної обізнаності для агентивних систем ШІ, до яких матимуть доступ користувачі. Щоб розвіяти занепокоєння щодо приватності, представники Qualcomm зазначили, що камери на майбутніх навушниках матимуть низьку роздільну здатність і не зможуть ідентифікувати конкретних осіб завдяки ШІ-маскуванню, яке автоматично їх приховуватиме.

Наразі немає інформації про те, як ці функції вплинуть на час роботи від батареї порівняно зі звичайними пристроями без ШІ. Однак представники Qualcomm зазначили, що виробникам пристроїв більше не доведеться вибирати між якістю звуку, функціями ШІ та часом роботи від батареї. Водночас Ендрю Лейстер, менеджер з продукції Qualcomm, додав під час сесії запитань та відповідей для преси, що вплив на досвід користувача щодо розряду батареї, ймовірно, буде. Це пов’язано з тим, що, на відміну від традиційних навушників, які використовуються спорадично для дзвінків та відтворення музики, ці нові пристрої розроблені для безперервного використання.

Порівняння нового ШІ-чіпа Qualcomm з аналогічними технологіями

Навушники з підтримкою ШІ вже існують у певній формі. Наприклад, виробник Viaim цього року випустив пристрої Rise та RecDot. Вони призначені для запису, транскрипції, перекладу та узагальнення розмов, хоча деталі про чипи, що їх живлять, не є загальнодоступними. Apple AirPods, наприклад, надають доступ до системи ШІ Siri, але для виконання складних завдань вимагають постійного підключення до iPhone.

Це як перший момент зі смартфоном та Play Store.

Ендрю Лейстер, менеджер з продукції Qualcomm.

• Штучний суперінтелект (ASI): наукова фантастика чи реальна загроза людству?
• Чому ШІ почав масово зламувати системи?
• Вчені Google видалили критичний “захист від свідомості” зі ШІ у новому дослідженні. Що сталося далі?

Лейстер повідомив журналістам під час сесії запитань та відповідей, що компанія наразі вивчає можливість одночасного запуску двох застосунків у оперативній пам’яті (RAM) — наприклад, ШІ-агента та платформи потокового аудіо — зберігаючи решту у флеш-пам’яті (довготривале сховище). Він додав, що компанії довелося подолати комунікаційний бар’єр щодо Wi-Fi з низьким енергоспоживанням під час запуску попереднього чипа (зокрема, його енергоспоживання було на рівні Bluetooth). Зараз, за його словами, комунікаційним бар’єром є саме можливість запускати застосунки на пристрої.

ТЕМИ

Sourse: www.livescience.com