Генераторы изображений ИИ могут создавать фотореалистичные изображения, цифровые картины и абстрактное искусство из текстового описания. Технология быстро развивается с 2022 года.

Как работают диффузионные модели

Диффузионные модели обучаются путём постепенного добавления шума к реальным изображениям. Модель учится обращать этот процесс: начиная с чистого шума, она удаляет его шаг за шагом, сначала появляются общие формы, затем мелкие детали.

Роль текстовых кодировщиков

Промпт переводится кодировщиками, такими как CLIP, обученным на сотнях миллионов пар изображение-текст. Числовое представление направляет процесс удаления шума, чтобы изображение отражало описанные концепции.