11:35
+19 C°
Пробки:   1
$
70.4413
79.1901

Microsoft научила нейросеть рисовать сложные сцены по текстовому описанию

28 июня 2019 года
1985
Microsoft научила нейросеть рисовать сложные сцены по текстовому описанию

Исследовательская группа Microsoft Research представила генеративно-состязательную нейросеть, которая способна генерировать изображения с несколькими объектами на основе текстового описания. В отличие от более ранних подобных алгоритмов text-to-image, способных воспроизводить изображения только базовых объектов, эта нейросеть может справляться со сложными описаниями более качественно.

Сложность создания подобного алгоритма заключалась в том, что, во-первых, ранее бот был не способен в хорошем качестве воссоздавать все базовые объекты по их описаниям, и, во-вторых, не мог проанализировать то, как несколько объектов могут относиться друг к другу в рамках одной композиции. К примеру, чтобы создать изображение по описанию «Женщина в шлеме сидит на лошади», нейросеть должна была семантически «понять», как каждый из объектов относится друг к другу. Эти проблемы удалось решить, обучив нейросеть на основе открытого дата-сета COCO, содержащего разметку и данные сегментации для более 1,5 млн объектов.

В основе алгоритма лежит объектно-ориентированная генеративно-состязательная нейросеть ObjGAN (Object-driven Attentive Generative Adversarial Newtorks). Она анализирует текст, выделяя из него слова-объекты, которые необходимо расположить на изображении. В отличие от обычной генеративно-состязательной сети, состоящей из одного генератора, который создает изображения, и одного дискриминатора, который оценивает качество сгенерированных изображений, ObjGAN содержит два различных дискриминатора. Один анализирует, насколько реалистичен каждый из воспроизведенных объектов и насколько он соответствует имеющемуся описанию. Второй определяет, насколько вся композиция реалистична и соотносится с текстом.

Предшественником алгоритма ObjGAN стал AttnGAN, также разработанный исследователями Microsoft. Он способен генерировать изображения объектов по более простым текстовым описаниям. Технология преобразования текста в изображения может применяться для помощи дизайнерам и художникам в создании эскизов.

Алгоритм ObjGAN находится в открытом доступе на GitHub.

 

Метки: Array, Array, Array

Пресс-релизы компании

Смотреть все
Тимур Бекмамбетов и Microsoft договорились о стратегическом сотрудничестве по цифровизации кинопроизводства
15 октября 2019 года
1898
Кинокомпания Тимура Бекмамбетова Bazelevs и Microsoft договорились о стратегическом сотрудничестве в сфере цифровизации кинопроизводства. Соответствующий документ был подписан сторонами в лице Тимура Бекмамбетова и Кристины Тихоновой, президента
Искусственный интеллект поможет подобрать интерьер с фотографий и видео
29 августа 2019 года
2024
Разработчик ИИ-решений Sarafan Technology Inc., партнер Microsoft, представил не имеющий аналогов в России сервис по поиску предметов интерьера на фото и видео. Первым эксклюзивным медиапартнером интеллектуального сервиса стал бренд «Домашний о
Выпущены обновления безопасности Microsoft за май 2019
17 мая 2019 года
2029
Компания Microsoft выпустила обновления безопасности для следующих продуктов: Windows, Windows Server, Microsoft Edge, Internet Explorer, Office, SharePoint Server, SQL Server, Visual Studio, Team Foundation Server, Azure DevOps Server, Dynamics CRM/
ИИ-виджеты Sarafan.AI теперь доступны в облаке Microsoft Azure
19 марта 2019 года
1664
Виджеты нативной рекламы от компании Sarafan Technology Inc. стали доступны для всех участников облачной экосистемы Microsoft на платформах AppSource и Azure Marketplace. Медиаплощадки и онлайн-издания могут оставить заявку на их бесплатное подключен
Just Cause 4 и другие игры пополнят каталог Xbox Game Pass в марте
7 марта 2019 года
1864
Команда Xbox поделилась списком игр, которые присоединятся к постоянно растущему каталогу Xbox Game Pass в ближайшее время. В марте все подписчики сервиса получат доступ к следующим проектам: Just Cause 4 (Уже доступна) Это птица? Это самолет?

Свежие пресс-релизы

Смотреть все
Ищем ПАРТНЕРОВ в регионах РФ (франчайзинг)
6 июня 2017
6720
Приглашаем к партнёрству (франчайзинг). Создайте уникальный бизнес портал в своём регионе! У вас есть возможность приобрести готовый бизнес с месячной прибылью более 250 тыс.руб после выхода на полный объём продаж, при первоначальных затратах от 100
ВТБ увеличивает сумму кредита ипотеки со ставкой 6,5%
30 июня 2020
601
ВТБ первым из банков с 30 июня увеличивает размер максимально возможной суммы кредита в рамках программы «Ипотека с господдержкой 2020». Теперь клиенты смогут оформить ипотеку со ставкой 6,5% на покупку нового жилья в размере до 6 млн руб
ВТБ и Сургутский институт экономики, управления и права впервые провели онлайн-практику для студентов
30 июня 2020
593
Сургутский институт экономики, управления и права (СИЭУиП) при поддержке банка ВТБ в ХМАО впервые реализовал проект дистанционной производственной практики. В условиях пандемии студенты вуза, обучающиеся по специальности «Банковское дело»
УК «Альфа-Капитал»: частные инвесторы продолжают наращивать позиции, несмотря на волатильный рынок
29 июня 2020
675
Россияне продолжают активно вкладывать средства в инструменты коллективных инвестиций. За пять месяцев 2020 года активы открытых и биржевых ПИФов выросли на 15% и превысили 550 млрд рублей. Наибольшие притоки управляющие отмечают в сегменте биржевых
СК «Ингосстрах-Жизнь» продала более 2,5 тысяч полисов «СтопКоронавирус» и получила более 100 обращений от заболевших клиентов
29 июня 2020
672
По состоянию на 26 июня 2020 года продукт «СтопКоронавирус» компании «Ингосстрах-Жизнь» приобрели свыше 2,5 тысяч клиентов: 96% оформленных полисов приходится на взрослых, 4% — на детей. Компания
Лучшие пресс-службы
ВТБ
Новостей: 425
Ингосстрах
Новостей: 422
Тюменьэнерго
Новостей: 81
Почта России
Новостей: 79
Сбербанк
Новостей: 71
ВТБ Лизинг
Новостей: 70
Ростелеком
Новостей: 62
Тулэнерго
Новостей: 62
Промсвязьбанк
Новостей: 57
Билайн
Новостей: 54
Следуйте за нами