Arm Mali G2-Ultra NX получил нейронный апскейлинг и генерацию кадров

Arm впервые встроила отдельные Neural Accelerators прямо в графический конвейер Mali. Новый Mali G2-Ultra NX использует их для нейронного апскейлинга, генерации промежуточных кадров и денойзинга трассировки лучей — то есть переносит в мобильный GPU набор приёмов, уже знакомых по современным ПК-видеокартам.

Mali G2-Ultra NX поддерживает три ключевые технологии нейронной графики:

• Neural Super Sampling (NSS) — нейронный апскейлинг, который восстанавливает изображение высокого разрешения из более низкого. Для стандартного режима 2× Arm приводит пример масштабирования с 540p до 1080p;
• Neural Frame Rate Upscaling (NFRU) — генерация промежуточных кадров. В демонстрационном сценарии Neural Dawn технология удваивает частоту вывода с 30 до 60 FPS;
• Neural Super Sampling and Denoising (NSSD) — сочетание апскейлинга с удалением шума из результата трассировки лучей.

Здесь стоит не складывать все рекламные цифры Arm в один показатель. Для Mali G2-Ultra NX компания заявляет до четырёхкратного роста FPS при том же длительном лимите мощности по сравнению с нативным рендерингом. Отдельно в демонстрации Neural Dawn связка NFRU и NSSD показала, по данным Arm, до четырёхкратного повышения эффективности и до 70% меньший трафик внешней памяти. Это разные измерения, и оба пока опираются на тесты самой Arm.

Без нейронного рендеринга прирост скромнее: Arm заявляет до 24% в графических бенчмарках и до 14% в играх по сравнению с предыдущим поколением. Новый Execution Engine компания называет крупнейшей переработкой ISA Mali за семь поколений.

Изменился и блок трассировки лучей. Mali G2-Ultra NX получил Ray Tracing Unit третьего поколения, рассчитанный на более сложное освещение, тени, отражения и геометрию. В тестах Arm новая архитектура сокращала трафик DRAM в ray-tracing-бенчмарках до 13%, а аппаратные Opacity Micromaps в одной из демонстраций повысили FPS на 30% и уменьшили связанную с трассировкой лучей нагрузку до 70%.

Показательной демонстрацией стала Neural Dawn, которую Arm разрабатывала вместе с Sumo Digital. В ней NFRU и NSSD освобождают часть графического бюджета для более тяжёлых эффектов, включая Unreal Engine MegaLights. Это пока именно демонстрация возможностей платформы, а не доказательство того, что такой прирост автоматически появится в любой мобильной игре.

В CSS for Mobile 2 графику дополняет новый CPU-кластер C2: в него входят производительные C2-Ultra, более эффективные C2-Pro и два блока SME2 для AI-нагрузок. Arm заявляет до 15% более высокой однопоточной производительности, до 12% прироста в многопоточных задачах, ускорение веб-браузинга на 15% и запуска приложений на 12%. Для выбранных AI-моделей компания указывает прирост до 1,7 раза.

CSS for Mobile 2 при этом не является одним готовым мобильным процессором с жёстко заданной конфигурацией. Arm позволяет партнёрам использовать C2, Mali G2-Ultra NX и системную IP как вместе, так и отдельно, добавляя собственные блоки. В сегодняшнем анонсе компания не назвала партнёрский SoC, построенный именно на полной конфигурации CSS for Mobile 2.

Источник: Arm Newsroom.