Qualcomm разрабатывает более 40 моделей носимых устройств с ИИ — от украшений и колец до очков
Новый чип Snapdragon Reality Elite даёт до 160% прироста производительности нейроблока
Платформа запускает языковую модель на 3 млрд параметров со скоростью 45 токенов в секунду
Программа START предлагает готовые референсные конструкции для быстрого выпуска очков
Генеральный директор Qualcomm Кристиано Амон заявил, что компания работает более чем над 40 различными носимыми устройствами с искусственным интеллектом, включая украшения, наушники с камерами, значки-булавки и часы. Это показывает, насколько агрессивно производитель чипов делает ставку на то, что следующая крупная вычислительная платформа не будет смартфоном.
Источник изображения — techcrunch.com
Что представила компания
Для реализации этого замысла анонсированы два продукта: платформа Snapdragon Reality Elite для очков смешанной реальности, рассчитанная на более производительную работу ИИ прямо на устройстве, и START — комплект из аппаратных модулей и программной обвязки для устройств с ИИ, начиная с умных очков.
По сравнению с предыдущей платформой новый чип обеспечивает прирост производительности графики до 60%, процессора — до 30% и нейроблока — до 160%. Процентные приросты в характеристиках чипов оценить на слух трудно, поэтому важнее конкретный показатель: платформа запускает языковую модель с 3 млрд параметров со скоростью 45 токенов в секунду — этого достаточно для быстрых и отзывчивых ответов.
Ключевое здесь — работа модели на самом устройстве. Очки, которые обрабатывают запрос локально, не отправляют изображение с камеры в облако, отвечают без задержки на связь и не зависят от качества интернета. Для устройства, постоянно видящего окружение владельца, это одновременно вопрос удобства и приватности.
Картинка и типы устройств
Чип поддерживает разрешение 4,4K на каждый глаз при 90 кадрах в секунду — небольшое улучшение по сравнению с предшественником. Чем выше разрешение на глаз и частота кадров, тем четче и плавнее изображение, а это напрямую влияет на укачивание и усталость глаз, которые исторически мешали пользоваться гарнитурами подолгу.
Платформа рассчитана на два типа устройств:
- автономные гарнитуры, которые накладывают цифровое изображение на видеопоток с камер реального мира;
- лёгкие подключаемые очки, встраивающие изображение непосредственно в поле зрения владельца.
Среди первых устройств на новой платформе называют разработки XREAL и Play for Dream.
START: очки под собственным брендом
Второй продукт состоит из чипа, программной платформы, сопутствующих приложений и программы выпуска устройств под чужими марками. В её рамках предлагаются три готовые конструкции: связка аудио плюс камера (как у популярных умных очков), монокулярный дисплей и бинокулярный дисплей.
Первыми партнёрами станут производители оправ, а в будущем программа расширится и на другие форм-факторы. Смысл её прозрачен: снизить порог входа для новых участников рынка настолько, чтобы выпустить умные очки мог не только технологический гигант, но и компания, которая до этого делала обычные оправы.
Стратегия для производителя чипов знакомая и проверенная: заработать не на одном заказчике, а на всех сразу. Так в своё время устроился рынок Android-смартфонов, где Qualcomm поставляла платформу десяткам конкурирующих брендов и выигрывала независимо от того, чьё устройство покупал потребитель.
Логика ставки
Комментарии Амона раскрывают стратегический расчёт. По его словам, по мере того как компании будут стремиться собирать больше данных о реальном мире для работы своих ИИ-агентов, появится новая волна аппаратных стартапов с необычными форм-факторами — а это уже серьёзные последствия для нынешних лидеров рынка смартфонов.
«Я думаю, будет много экспериментов с различными форм-факторами, — сказал он. — Прямо сейчас у нас есть более 40 дизайнов таких устройств, и типы форм-факторов очень и очень разнообразны». Принцип, по его словам, в том, что это «то, что вы носите, что всегда с вами, что может видеть окружающий мир, так что у вас есть контекст и возможность поговорить с агентом».
Формулировка «может видеть окружающий мир» и есть главный нерешённый вопрос всей категории. Устройства, постоянно снимающие происходящее вокруг, упираются не в технику, а в общественное согласие: предыдущая волна умных очков разбилась именно об это, а не о недостаток вычислительной мощности. Локальная обработка данных — попытка ответить на претензию, но она не отменяет вопроса о согласии тех, кто попадает в кадр.
Читателям из СНГ стоит держать в уме и правовую сторону: съёмка в общественных местах и обработка изображений людей регулируются местным законодательством, а сами устройства такого класса в регион официально не поставляются — так что знакомство с категорией пока идёт через параллельный импорт.
