В мире современных мобильных устройств однокристальные системы (SoC) продолжают совершенствоваться, и их возможности уже позволяют справляться с наиболее требовательными задачами, включая запуск современных видеоигр с высокой графической детализацией. Однако перспективы их дальнейшего развития обещают сделать даже самые сложные графические процессы еще более доступными и менее нагрузочными для устройств. В этом направлении особенно заметен прогресс благодаря новым разработки компании Arm, которая является одним из лидеров в области архитектур процессоров и графических решений для мобильных устройств.
Одной из наиболее значимых инноваций является технология Neural Super Sampling (NSS), которая предназначена для усиления графики в смартфонах с использованием искусственного интеллекта. На сегодняшний день подобные методы, такие как DLSS (Deep Learning Super Sampling), успешно применяются в области ПК-графики и игровых консолей, позволяя повышать разрешение изображений с меньшими затратами ресурсов. Идея аналогична и в мобильной среде — Arm представила собственный апскейлер NSS, который фактически является аналогом DLSS, но адаптированным для архитектуры мобильных процессоров.
Ранее компания Arm анонсировала технологию Accuracy Super Resolution (ASR), основанную на FSR 2.0 (FidelityFX Super Resolution), разработанную компанией AMD. Новая же технология, NSS, является более продвинутым развитием этого направления, уже ближе к FSR 4.0, что обещает еще большие возможности по повышению графического качества без существенной нагрузки на систему. Все эти разработки реализуются при помощи интеграции в графические ядра Arm новых модулей нейросетей (NPU — Neural Processing Units), специально предназначенных для обработки задач машинного обучения и искусственного интеллекта.
Реализация NSS предполагает использование выделенных блоков ИИ внутри GPU, что значительно повышает их эффективность. Модуль NPU сможет достигать производительности более 10 TOPS (триллионов операций в секунду) на ватт, что обеспечивает высокую производительность при минимальном энергопотреблении. В результате, начиная со следующего года, смартфоны с системами на базе SoC Arm смогут масштабировать разрешение графики с 540p до 1080p примерно за 4 миллисекунды на один кадр. Это значительно снизит нагрузку на GPU — примерно на 50%, сохраняя визуальное качество и обеспечивая плавность геймплея.
Эти технологии позволяют не только повышать разрешение изображений, создавая более детализированную картинку, но и оптимизировать процессы рендеринга, сокращая расход энергии и позволяя смартфонам работать дольше без подзарядки. В результате игры и мультимедийные приложения станут еще более качественными и энергоэффективными, а пользователи смогут наслаждаться максимально реалистичной графикой без необходимости покупать высокопроизводительные, и при этом дорогостоящие, компьютеры или игровые приставки.
В целом, развитие технологий AI-апскейлинга на базе архитектуры Arm обещает революцию в области мобильной графики. Она приблизит качество изображений в мобильных играх и мультимедийных приложениях к тому, что ранее было возможно только на специализированных устройствах или ПК высокого класса. Более того, такие технологические достижения способствуют уменьшению требований к аппаратной начинке смартфонов, что в свою очередь откроет новые возможности для разработки более тонких, легких и энергоэффективных устройств без потери в графическом качестве. Это станет важным шагом в эволюции мобильных устройств и расширении их функциональных возможностей в будущем.