Microsoft анонсувала проект із генерації зображень на основі творів мистецтва
Microsoft анонсувала проект із генерації зображень на основі творів мистецтва
Microsoft анонсувала проект із генерації зображень на основі творів мистецтва. Компанія розробила технологію спільно з Метрополітен-музеєм та Массачусетським технологічним інститутом (MIT)
Використовуючи загальнодоступні API-інтерфейси, зображення та ключові слова, фахівці представили програму під назвою Gen Studio, що дозволяє комбінувати різні об'єкти з колекції Метрополітен-музею. Сервіс на основі генеративно-змагальної мережі (GAN) також об'єднаний з візуальним пошуком, що дозволяє користувачам вивчати колекцію та відкривати нові галузі художнього простору.
В основі лежить GAN, здатна знаходити найближчу відповідність між заданим зображенням і справжнім витвором мистецтва Метрополітен-музеї та комбінувати їх у єдиній роботі. Крім того, користувачі можуть самостійно змішувати різні твори – розробники сподіваються, що це допоможе людям краще зрозуміти візуальну структуру, що лежить в основі музейної колекції, а також створювати та комбінувати художні роботи, що базуються на різних стилях, матеріалах та формах.
Для створення цього сервісу розробники використовували мікросервісну архітектуру глибоких нейромереж, служби Azure і сховище BLOB-об'єктів. Visual Studio Code і Azure Kubernetes Service дозволяють створювати нові зображення в режимі реального часу та відповідають за інтерактивний зовнішній вигляд сайту.
Azure Kubernetes Service суттєво спрощує виробництво, дозволяючи розгорнути сервіс лише за кілька днів. Щоб користувачі могли вивчити колекцію Метрополітен-музею, розробники завантажили всі доступні зображення до кластеру Azure Databricks і використовували машинне навчання Microsoft для Apache Spark, щоб забезпечити ці зображення описами. За допомогою ResNet50 було створено швидкий пошук за візуальною подібністю, а дані із кластера були завантажені в службу пошуку Azure.
