Qualcomm представила процессор Snapdragon Reality Elite для шлемов и очков смешанной и дополненной реальности. Основной акцент в новом чипе сделан на локальном запуске генеративных ИИ‑моделей без обращения к облаку.
Нейронный блок чипа обеспечивает производительность 48 TOPS, что достаточно для работы крупных языковых и визуальных моделей непосредственно на устройстве. В Qualcomm считают, что это открывает возможности для ИИ‑агентов, создания фотореалистичных аватаров и генерации объектов, вписанных в реальное окружение.
По сравнению с предыдущим поколением XR2+ Gen 2 графическая подсистема Adreno прибавила до 60%, центральный процессор — до 30%, а производительность NPU выросла на 160%. Отдельный блок Engine for Visual Analytics (EVA) берёт на себя ресурсоёмкие задачи компьютерного зрения — измерение глубины сцены и обработку сквозного видео.
Дисплейная подсистема Snapdragon Reality Elite поддерживает разрешение до 4,4K на каждый глаз с частотой 90 кадрах в секунду. Кроме того, снижена задержка видео, что делает наложение виртуальных объектов на реальный мир более бесшовным. При аналогичной нагрузке энергопотребление удалось сократить примерно на 20%.
Первым коммерческим продуктом на Snapdragon Reality Elite станут очки Project Aura — совместная разработка Xreal и Google под управлением Android XR. О планах использовать Snapdragon Reality Elite также заявил производитель шлемов Play for Dream.
ссылка на оригинал статьи https://habr.com/ru/articles/1049544/