Компания Arm сделала важный шаг в развитии графических технологий, представив инновационную нейронную архитектуру для GPU, которая уже обещает кардинально изменить подход к визуализации на мобильных устройствах. В рамках своей инициативы она подготовила передовую нейронную технологию, предназначенную для интеграции в графические процессоры, что позволит добиться уровня компьютерной графики, ранее доступного только на мощных настольных системах. Ожидается, что уже к 2026 году данное решение станет полностью интегрированной частью мобильных устройств, значительно улучшая их визуальные характеристики и энергоэффективность.
Это решение включает в себя использование отдельных нейронных ускорителей внутри GPU, что значительно снижает нагрузку на основной графический процессор, уменьшая её примерно в два раза при работе с современным контентом. Одним из первых приложений новой архитектуры станет Neural Super Sampling (NSS) — комплекс технологий на базе искусственного интеллекта, который в состоянии увеличить разрешение изображения в два раза всего за 4 миллисекунды на кадр. NSS позволяет, например, масштабировать изображение с 540p до 1080p с сохранением высокого качества, практически не теряя деталей, уровней освещения и четкости движения. Это дает разработчикам возможность освободить ресурсы для повышения частоты кадров, улучшения графики или снижения энергопотребления.
Важной частью этой инициативы стало создание и запуск первого в мире открытого набора инструментов для работы с нейросетями и графикой, что значительно упростит интеграцию новых технологий в производственный процесс и даст прямой доступ разработчикам. В набор входят плагины для Unreal Engine, эмуляция Vulkan, расширенные инструменты профилирования, а также полностью открытые модели, размещенные на GitHub и Hugging Face. Кроме того, на базе Arm были созданы расширения ML для Vulkan с новым Graph Pipeline, специально оптимизированным для нейросетевых вычислений.
Поддержку этой инициативы уже выразили ведущие компании индустрии, такие как Epic Games, NetEase, Sumo Digital, Tencent Games, Enduring Games и Traverse Research. Благодаря этим технологиям, популярные игры вроде Fortnite и Infinity Nikki уже используют улучшения для повышения резкости, стабильности изображения, обработки теней и тонкой геометрии, а также работы с частицами. Это свидетельствует о высокой заинтересованности индустрии в развитии нейросетевых решений.
Планы Arm на ближайшее будущее включают расширение линейки технологий. К 2026 году ожидается запуск Neural Frame Rate Upscaling, который позволит удвоить частоту кадров без увеличения нагрузки на GPU, а также Neural Super Sampling с алгоритмами денойзинга, способными реализовать трассировку пути в реальном времени на мобильных устройствах. Эти технологии позволят в ближайшем будущем добиться уровня графики и реалистичности, ранее доступных только на мощных ПК и консолях, — всё это будет доступно разработчикам до появления нового аппаратного обеспечения, что ускорит внедрение новых стандартов визуализации в мобильную индустрию.