новости мобильных систем, носимой электроники и гаджетотворения

Юмор и креатив от Артура Мебиу…

21-06-2019 Hits:48 персоналии

Arthur Mebius — фотограф и владелец рекламного агентства. Он живёт и работает в Голландии.  

Система фильтров Omni Creative…

21-06-2019 Hits:74 cifmir

Lensbaby выпустила очень необычный набор фильтров Omni Creative, который использует кольцевую насадку, магнитные крепления и различные хрустальные палочки для создания...

Креатив от Petra Tiihonen

20-06-2019 Hits:41 персоналии

Alias Creative – это группа творческих людей, которая способна удовлетворить запросы в креативе самых требовательных клиентов.  

Затейливые образы Эриха Капара…

20-06-2019 Hits:37 персоналии

Он родился на Филиппинах, но вырос в Северной Вирджинии, Вашингтон, округ Колумбия, США.  

Сложные для восприятия панорам…

20-06-2019 Hits:45 персоналии

Мы продолжаем серию фантастических панорам, от фотографов, которые смогли перевернуть реальность в своих фотографиях.  

Fujifilm обновила прошивки опт…

20-06-2019 Hits:56 cifmir

Компания Fujifilm выпустила обновление прошивок для всех объективов Fujinon GF, добавив поддержку фазовой автофокусировки при установке на Fujifilm GFX 100...

Городские джунгли новой Leica …

20-06-2019 Hits:67 cifmir

Leica объединилась с фотографом и коллекционером произведений искусства Жаном Пигоцци Jean Pigozzi), чтобы выпустить специальную версию своей системной камеры Leica...

Выпуск адаптера TECHART "…

20-06-2019 Hits:61 cifmir

Компания Focus Studio Co., Ltd. объявила, что перенесет июньский график выпуска своего адаптера TECHART "TZE-01" на июль. Причиной называются производственные...

Cosina раскрыла спецификации и…

20-06-2019 Hits:46 cifmir

Производитель оптики компания Cosina выпустила более подробную информацию о будущем объективе NOKTON 75mm F1.5 Aspherical VM своей линейки Voigtländer Vintage...

 

Microsoft научила нейросеть рисовать картины по текстовому описанию

Исследователи из Microsoft Research разработали нейросеть, способную создавать сложные изображения на основе текстового описания.

 

Microsoft научила нейросеть рисовать картины по текстовому описанию

В отличие от других text-to-image алгоритмов, умеющих визуально генерировать только базовые объекты, эта программа может понимать описание сразу нескольких составляющих рисунка.

 

Microsoft

Пример работы новой нейросети Microsoft

 

Сложность создания подобного алгоритма заключалась в том, что ранее нейросеть не умела воссоздавать в хорошем качестве все базовые объекты по их описаниям и анализировать то, как несколько предметов могут относиться друг к другу в рамках одной композиции. К примеру, чтобы создать изображение по описанию «Женщина в шлеме сидит на лошади», нейросеть должна была семантически «понять», как каждый из объектов относится друг к другу. Эти проблемы разработчикам Microsoft удалось решить, обучив нейросеть на основе открытого дата-сета COCO, содержащего разметку и данные сегментации для более 1,5 миллиона объектов.

Microsoft

 

В основе нового алгоритма лежит объектно-ориентированная генеративно-состязательная нейросеть ObjGAN. Она анализирует текст, выделяя из него слова-объекты, которые необходимо расположить на изображении. В отличие от обычной генеративно-состязательной сети, состоящей из одного генератора, который создаёт изображения, и одного дискриминатора, который оценивает качество сгенерированных картинок, ObjGAN содержит два различных дискриминатора. Один анализирует реалистичность каждого из воспроизведённых объектов и их соответствие имеющемуся описанию, а второй определяет, насколько вся композиция реалистична и соотносится с текстом.

 

Новая технология преобразования текста может применяться дизайнерами и художниками для быстрого создания эскизов.

Алгоритм ObjGAN представлен в открытом доступе на GitHub.


источник >>

 

Рейтинг@Mail.ru