Новая нейросеть Google создаёт ультрареалистичные картинки

Google представила собственную версию генератора изображений под названием Imagen. В отличие от существующих аналогов, в нём сочетаются глубокий уровень понимания языка с беспрецедентной степенью фотореализма. Некоторые работы нейросети, какими бы сумасшедшими они ни были, порой сложно отличить от настоящих фотографий.  

Изображение, созданное по запросу «A dragon fruit wearing karate belt in the snow»

Imagen основывается на мощных моделях понимания текста и его преобразования в высокоточные изображения. Google разработала тест для оценки моделей преобразования текста в картинку под названием DrawBench. Людям было предложено оценить изображения, созданные нейросетями. Работы Imagen получили больший отклик, обойдя даже известный генератор DALL-E 2.

Пока что Google решила не публиковать исходный код или публичную демонстрацию Imagen из-за риска его неправильного использования в социальных сферах. Генератор полагается на текстовые кодировщики, обученные на некурируемых данных веб-масштаба и, таким образом, наследует социальные предубеждения и ограничения больших языковых моделей. Есть риск, что Imagen впитал вредные стереотипы и архаичные представления, одно лишь упоминание которых может поставить крест на едва зародившейся нейросети.

Тем не менее на сайте проекта можно оценить разные работы и даже наглядно посмотреть, как Imagen генерирует изображения при изменении вводного текста. 

Источник: 4PDA.