Arm представила графический процессор Mali G2-Ultra NX, который компания называет первым AI-native Mali GPU. В Arm сообщает, что новинка рассчитана на более качественную мобильную графику при ограничениях по питанию, теплу и пропускной способности.
По словам Arm, Mali G2-Ultra NX объединяет нейроускорение с ядрами шейдеров, общими кэшами, системой памяти и управляющими структурами GPU. Компания пишет, что это помогает сократить лишние перемещения данных и повысить эффективность графического конвейера.
В основе GPU лежат три нейротехнологии. Neural Super Sampling восстанавливает более высокое разрешение из менее затратного рендера. Neural Frame Rate Upscaling создаёт промежуточные кадры для более плавной анимации. Neural Super Sampling and Denoising добавляет шумоподавление для сцен с трассировкой лучей, где много света, теней и сложной геометрии.
Arm также приводит показатели для Neural Dawn, демо, созданного вместе с Sumo Digital. По данным компании, сочетание NFRU и NSSD даёт до 4x более высокую эффективность производительности и до 70% меньший внешний трафик памяти по сравнению с нативным рендерингом. В Arm отдельно отмечают, что вместе с NFRU графика может работать до 120 FPS, а новые возможности рейтрейсинга снижают DRAM-трафик до 13% на ведущих бенчмарках.
Третье поколение аппаратной трассировки лучей должно улучшить освещение, тени, отражения и работу со сложной геометрией на мобильных устройствах. В демо Arm использование Opacity Micromaps подняло частоту кадров на 30% и сократило нагрузку на трассировку лучей до 70%.
Arm начала готовить софт-стек ещё за два года до появления Mali G2-Ultra NX. Для этого компания выпустила Arm Neural Technology и открытый development kit для нейрографики, чтобы разработчики контента, инструментов и игровых движков могли заранее встроить новые методы в свои рабочие процессы.
Сейчас Arm Neural Graphics Development Kit включает NSS и NFRU, расширения машинного обучения для Vulkan, плагины для игровых движков, SDK для кастомных движков, а также инструменты профилирования, оптимизации графики, обучения и настройки моделей. По словам компании, это должно сократить путь от экспериментов до продакшена без необходимости собирать отдельную исследовательскую инфраструктуру.
Keli Zhou, Engine Lead for Where Winds Meet«Through our collaboration with Arm, we are integrating Arm Neural Technology into the Messiah Engine and bringing it into real-world game development. Where Winds Meet will be among the first games to bring Arm Neural Technology to players, marking an important step from engine-level integration to real-world deployment. Together, we are paving the way for broader developer adoption of neural graphics across the gaming ecosystem.»
В Arm подчёркивают, что GPU работает не сам по себе, а как часть Arm CSS for Mobile 2. В этой системе Mali G2-Ultra NX объединяют с вычислениями, памятью, софтом и оптимизациями реализации, чтобы партнёры по кремнию могли удерживать более сложные нагрузки в пределах мобильных ограничений по питанию и температуре.
Arm говорит, что с таким набором технологий повышается планка мобильной графики: устройство получает более чёткую картинку, более плавную анимацию и более сложные эффекты. На этот раз речь идёт не только о новом GPU, но и о том, как он встроен в архитектуру и в инструменты для разработчиков.