Французский разработчик и дизайнер Сириль Дианье представил прототип приложения AR Cut & Paste, с помощью которого можно копировать реальные объекты и вставлять их изображения в Adobe Photoshop с помощью систем искусственного интеллекта и дополненной реальности. Код и описание AR Cut & Paste опубликованы на сайте GitHub.
Сервис AR Cut & Paste позволяет сфотографировать объект на смартфон, а затем перенести его без фона на экран компьютера с открытым графическим редактором, при этом ракурс заснятого объекта сохранится.
4/10 - Cut & paste your surroundings to Photoshop
Code: https://t.co/cVddH3u3ik
Book: @HOLOmagazine
Garment: SS17 by @thekarentopacio
Type: Sainte Colombe by @MinetYoann @ProductionType
Technical Insights: ↓#ML #AR #AI #AIUX #Adobe #Photoshop pic.twitter.com/LkTBe0t0rF
— Cyril Diagne (@cyrildiagne) May 3, 2020
Для распознавания объекта и удаления фона приложением используется библиотека машинного обучения BASNet. Алгоритм OpenCV SIFT позволяет для вставки объекта определить точки на экране компьютера, на которые направлена камера.
The secret sauce here is BASNet (Qin et al, CVPR 2019) for salient object detection and background removal.
The accuracy and range of this model are stunning and there are many nice use cases so I packaged it as a micro-service / docker image: https://t.co/jbAmO89cRy pic.twitter.com/DGe9IffPtS
— Cyril Diagne (@cyrildiagne) May 3, 2020
При этом разработчик пока не уточняет, появится ли этот сервис на широком рынке. В описании сервиса на GitHub говорится, что несмотря на то, что AR Cut & Paste сейчас может переносить данные только в Photoshop, в будущем разработчик расширит количество сервисов, с которыми может работать приложение.
Читайте также:
В Британии введут «паспорт иммунитета»
Исследование: у неандертальцев были старые матери и молодые отцы