NVIDIA представила новую рамочную систему генерации изображений под названием DC-AR, которая значительно улучшает как эффективность, так и качество в задачах текстовой генерации.

DC-AR — это маскированная авторегрессионная модель, использующая гибридный токенизатор глубокого сжатия и новый процесс генерации. Она обеспечивает более высокое качество изображений и лучшую вычислительную эффективность по сравнению с предыдущими авторегрессионными моделями, которые уступали по производительности диффузионным моделям.

Это исследование ставит под сомнение предположение о том, что диффузионные модели являются единственным жизнеспособным вариантом для генерации изображений высокого качества. Эффективность, продемонстрированная DC-AR, может быть особенно полезна в таких областях, как создание контента, где скорость и качество имеют критическое значение.

DC-AR демонстрирует, что авторегрессионные модели могут обеспечивать как скорость, так и качество, предоставляя мощную альтернативу методам на основе диффузии для генерации изображений.

Применения:
1. Создание цифрового искусства: Обеспечивает более быструю генерацию изображений по текстовым подсказкам, что позволяет художникам быстрее реализовывать свои идеи.
2. Реклама: Может помочь автоматизировать производство визуальных материалов для рекламных кампаний, сокращая время на разработку.
3. Разработка игр: Полезна для генерации визуальных активов на основе нарративного ввода, что ускоряет процесс создания игровых миров.

NVIDIA в последние годы компания активно развивает технологии глубокого обучения и нейронных сетей, такие как TensorRT и CUDA, которые позволяют разработчикам создавать высокопроизводительные приложения для обработки данных и машинного обучения.