Лучшие приложения.
Лучшие приложения.
Лучшие приложения.
Лучшие приложения.

Microsoft научила нейросеть рисовать сложные сцены по текстовому описанию




Исследовательская группа Microsoft Research представила генеративно-состязательную нейросеть, способную генерировать изображения с несколькими объектами на основе текстового описания. По словам разработчиков, в отличие от более ранних подобных алгоритмов text-to-image, которые были способны воспроизводить изображения только базовых объектов, эта нейросеть может справляться со сложными описаниями более качественно.

Как отмечают разработчики, сложность создания подобного алгоритма заключалась в том, что, во-первых, ранее бот был не способен в хорошем качестве воссоздавать все базовые объекты по их описаниям, и, во-вторых, не мог проанализировать то, как несколько объектов могут относиться друг к другу в рамках одной композиции. К примеру, чтобы создать изображение по описанию «Женщина в шлеме сидит на лошади», нейросеть должна была семантически «понять», как каждый из объектов относится друг к другу. Эти проблемы удалось решить, обучив нейросеть на основе открытого дата-сета COCO, содержащего разметку и данные сегментации для более 1,5 млн объектов.

В основе алгоритма лежит объектно-ориентированная генеративно-состязательная нейросеть ObjGAN (Object-driven Attentive Generative Adversarial Newtorks). Она анализирует текст, выделяя из него слова-объекты, которые необходимо расположить на изображении. В отличие от обычной генеративно-состязательной сети, состоящей из одного генератора, который создает изображения, и одного дискриминатора, который оценивает качество сгенерированных изображений, ObjGAN содержит два различных дискриминатора. Один анализирует, насколько реалистичен каждый из воспроизведенных объектов и насколько он соответствует имеющемуся описанию. Второй определяет, насколько вся композиция реалистична и соотносится с текстом.

Предшественником алгоритма ObjGAN стал AttnGAN, также разработанный в Microsoft. Он способен генерировать изображения объектов по более простым текстовым описаниям. По словам разработчиков, технология преобразования текста в изображения может применяться для помощи дизайнерам и художникам в создании эскизов.
Автор: Softodrom.ru
Дата:
Новые публикации: Наука и техника
20.02.2020 18:31

«Калашников» показал малогабаритный автомат Драгунова

Уже в 21 веке нестандартные конструкторские решения Драгунова получили вторую жизнь и нашли применение в образцах под названием АМ-17 и АМБ-17

18.02.2020 21:21

«КАМАЗ» разработал бескабинный грузовик

«КАМАЗ» получил патент на электрический беспилотный грузовой автомобиль без кабины для водителя

16.02.2020 10:42

«Яндекс» показал, как робот-курьер развозит посылки из «Беру»

Компания «Яндекс» приступила к новому этапу испытаний робота-курьера «Яндекс.Ровер»

14.02.2020 20:20

«Калашников» показал опытную снайперскую винтовку Калашникова

Образец был предложен Михаилом Калашниковым в 1959 году, однако не смог составить конкуренцию снайперской винтовке Драгунова ССВ-58

10.02.2020 21:52

«Калашников» показал, как убить ППШ

Начатый в 1940 году в СССР конкурс на создание эффективного и простого в производстве пистолета-пулемета завершился принятием на вооружение ППШ

Популярные статьи: Наука и техника
03.02.2020 18:20

В России появятся автономера с кодом региона 666

Подразделениям ГИБДД России разрешат выдавать номера с трехзначными кодами регионов, начинающимися с цифр 2, 3, 4, 5, 6, 8 и 9

14.02.2020 20:20

«Калашников» показал опытную снайперскую винтовку Калашникова

Образец был предложен Михаилом Калашниковым в 1959 году, однако не смог составить конкуренцию снайперской винтовке Драгунова ССВ-58

16.02.2020 10:42

«Яндекс» показал, как робот-курьер развозит посылки из «Беру»

Компания «Яндекс» приступила к новому этапу испытаний робота-курьера «Яндекс.Ровер»

10.02.2020 21:52

«Калашников» показал, как убить ППШ

Начатый в 1940 году в СССР конкурс на создание эффективного и простого в производстве пистолета-пулемета завершился принятием на вооружение ППШ

09.02.2020 16:42

В Москве проведут пятилетний эксперимент по внедрению искусственного интеллекта

Москва станет экспериментальной площадкой по развитию искусственного интеллекта, для проведения эксперимента будет обеспечен специальный правовой режим

» Оставьте первым свой комментарий

Новости /
Наука и техника /
Microsoft научила нейросеть рисовать сложные сцены по текстовому описанию
Все рубрики статей:

Статистика | Рейтинги | Авторам | Реклама
Copyright © 1999-2020 Softodrom.ru
О перепечатках | Рассылки | Пользовательское соглашение | Политика конфиденциальности | О проекте | Карта сайта
Яндекс.Метрика 
В Опере нет автоматического способа добавить поиск по Софтодрому.
Чтобы вручную добавить поиск по Софтодрому, нужно сделать следующее:
  1. Нажать Ctrl+F12.
  2. Выбрать вкладку «Поиск».
  3. Нажать «Добавить» (Add).
  4. В появившемся окне:
    1. Заполнить название (Softodrom.ru).
    2. Заполнить адрес: https://www.softodrom.ru/Поиск/?text=%s&qs
      Если нет поля «адрес», то кликнуть на «Подробнее».
    3. Остальные поля заполнить по желанию.
  5. Нажать «ОК».