новости мобильных систем, носимой электроники и гаджетотворения

 

Фотопроект "Неподвижность…

05-12-2019 Hits:57 персоналии

Valentina Loffredo — итальянский фотограф, работает в Гонконге.  

Ruth Bernhard – величайший фот…

05-12-2019 Hits:46 персоналии

Ruth Bernhard – можно назвать одной из величайших фотографов в жанре ню, она родилась в Берлине 14 октября 1905 года...

Отчужденные миры Sanja Marusic…

05-12-2019 Hits:47 персоналии

Погрузитесь в вымышленные, сюрреалистические миры Sanja Marusic’s.  

Ben Zank и его сюрреалистическ…

05-12-2019 Hits:48 персоналии

Фото: Ben Zank Ben Zank мастер сюрреализма и современный любитель автопортретов.

Представлен RAW-конвертер Capt…

05-12-2019 Hits:39 cifmir

Phase One выпустила Capture One 20 Pro, профессиональный конвертер RAW для более чем 500 фотокамер.  

Robert Goetzfried и его спокой…

04-12-2019 Hits:49 персоналии

Robert Goetzfried – именитый немецкий фотограф, его знаменитая фотосерия «Бассены» потрясла мир своей живой дикостью.  

Wendy van Santen и Hans Bolleu…

04-12-2019 Hits:56 персоналии

Знаменитая голландская пара Wendy van Santen и Hans Bolleurs — фотографы, режиссеры, мыслители и создатели, работающие с повседневными предметами для...

Необычные миры фотографа Julia…

04-12-2019 Hits:53 персоналии

Фотографии Julia Hetta в своих работах дает представление об альтернативном мире, богатом романтикой и тишиной, ассоциирующимися с классической живописью.  

Красота абстрактного экспресси…

04-12-2019 Hits:45 персоналии

Rodrigo Chapa — мексиканский художник и фотограф, работающий в области дизайна.  

Microsoft научила нейросеть рисовать картины по текстовому описанию

Исследователи из Microsoft Research разработали нейросеть, способную создавать сложные изображения на основе текстового описания.

 

Microsoft научила нейросеть рисовать картины по текстовому описанию

В отличие от других text-to-image алгоритмов, умеющих визуально генерировать только базовые объекты, эта программа может понимать описание сразу нескольких составляющих рисунка.

 

Microsoft

Пример работы новой нейросети Microsoft

 

Сложность создания подобного алгоритма заключалась в том, что ранее нейросеть не умела воссоздавать в хорошем качестве все базовые объекты по их описаниям и анализировать то, как несколько предметов могут относиться друг к другу в рамках одной композиции. К примеру, чтобы создать изображение по описанию «Женщина в шлеме сидит на лошади», нейросеть должна была семантически «понять», как каждый из объектов относится друг к другу. Эти проблемы разработчикам Microsoft удалось решить, обучив нейросеть на основе открытого дата-сета COCO, содержащего разметку и данные сегментации для более 1,5 миллиона объектов.

Microsoft

 

В основе нового алгоритма лежит объектно-ориентированная генеративно-состязательная нейросеть ObjGAN. Она анализирует текст, выделяя из него слова-объекты, которые необходимо расположить на изображении. В отличие от обычной генеративно-состязательной сети, состоящей из одного генератора, который создаёт изображения, и одного дискриминатора, который оценивает качество сгенерированных картинок, ObjGAN содержит два различных дискриминатора. Один анализирует реалистичность каждого из воспроизведённых объектов и их соответствие имеющемуся описанию, а второй определяет, насколько вся композиция реалистична и соотносится с текстом.

 

Новая технология преобразования текста может применяться дизайнерами и художниками для быстрого создания эскизов.

Алгоритм ObjGAN представлен в открытом доступе на GitHub.


источник >>

 

Рейтинг@Mail.ru