Microsoft створила нейромережу, яка малює картинки за текстовим описом

Дослідницька група Microsoft Research презентувала нейромережу Obj-GAN, яка вміє малювати складні сцени з текстового опису користувача. 

Далина, разлогінься

На відміну від інших подібних алгоритмів, Obj-GAN може створити картинку за складним описом. Тепер бот малює більше деталей, а також вміє співвідносити їх один з одним. Всього Obj-GAN використовує розмітку та дані сегментації для більш ніж 1,5 млн об'єктів, малюючи їх подібно художнику, починаючи з начерку. Під час роботи аналізується як реалістичність конкретного об'єкта, так і реалістичність всієї композиції. 

За словами Microsoft, ця технологія може допомогти дизайнерам та художникам у створенні ескізів. І дійсно, поки що підсумковий результат схожий на чернетки якогось початківця художника-сюрреаліста. 

Алгоритм ObjGAN знаходиться у відкритому доступі на GitHub.

Джерело: Microsoft