ИИ научили генерировать 3D-голограммы в режиме реального времени

Ученые из США представили быстрый метод для генерации голограмм даже на обычном ноутбуке. Метод основан на работе сверточной нейронной сети.

Исследователи долгое время стремились создать голограммы, которые генерирует компьютер, но этот процесс требовал наличия суперкомпьютера, который бы выполнял моделирование физики, что отнимает много времени и выдает менее фотореалистичные результаты. Теперь исследователи из MIT разработали новый способ получения голограмм мгновенно, а метод, основанный на глубоком изучении, настолько эффективен, что может работать на ноутбуке.

«Раньше ученые думали, что при существующем оборудовании потребительского класса невозможно выполнять вычисления для 3D-голографии в реальном времени», — отмечает Лианг Ши, ведущий автор исследования и аспирант кафедры электротехники и вычислительной техники (EECS) Массачусетского технологического института (MIT).

Ши считает, что новый подход, который команда называет «тензорной голографией» поможет достичь этой цели быстрее. Это поможет создавать голографию в 3D и VR.

Они использовали глубокое обучение для ускорения компьютерной голографии, позволяя генерировать их в реальном времени. Команда спроектировала сверточную нейронную сеть — технологию обработки, использующую цепь тренируемых тензоров, чтобы грубо подражать тому, как человек обрабатывает визуальную информацию. Обучение нейросети обычно требует высококачественного набора данных, которого раньше не существовало для 3D-голограмм.

Команда создала пользовательскую базу данных, состоящую из 4 тыс. пар изображений, генерируемых компьютером. Для создания голограмм в новой базе данных исследователи использовали сцены со сложными и переменными формами и цветами, с равномерным распределением глубины пикселей от фона до переднего плана, а также с новым набором расчетов на основе физики для обработки окклюзии.

Обучаясь на каждой паре изображений, тензорная сеть подстраивала параметры собственных вычислений, последовательно повышая свою способность создавать голограммы. Полностью оптимизированная сеть работала на порядок быстрее, чем физические расчеты.


Читать далее

Физики создали аналог черной дыры и подтвердили теорию Хокинга. К чему это приведет?

Морские слизни отрезают себе голову, чтобы регенерировать новое тело

Аборты и наука: что будет с детьми, которых родят

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Больше миллиона Гбит в секунду: японцы побили рекорд скорости передачи данных по оптоволокну
Новости
Хаос во благо: физики создали новый инструмент для квантового мира
Наука
Hugging Face выпустила недорогих человекоподобных роботов с открытым кодом
Новости
Китайский аккумулятор для электромобиля выдержал наезд 36-тонного танка
Новости
Воспитанники детских домов изучат основы работы с нейросетями
Новости
Четвероногий робот из Цюриха научился играть в бадминтон с людьми
Новости
В MIT раскрыли механизм набора веса из-за жирной пищи и как обратить его вспять
Наука
60 000 лет рядом: ученые выяснили, кто стал первым паразитом человека
Наука
Ректора Университета Иннополис избрали членом-корреспондентом РАН
Иннополис
В Корее робопса научили паркуру и бегу по стенам: посмотрите, что он может
Новости
Древний череп «человека-муравья» нашли в Аргентине
Наука
На селфи марсохода попал неожиданный объект: его заметили не сразу
Космос
Посмотрите на двух морских коньков, которых застукали за «поцелуем» в океане
Наука
Почти 10 000 роутеров Asus тайно заразили: как проверить свой и защититься
Новости
Ракета будет доставлять товары с AliExpress за час по всему миру: ее испытали в Китае
Новости
В России пригрозили «душить» иностранные сервисы: кто в опасности
Новости
Boston Dynamics усовершенствовала систему восприятия гуманоидного робота Atlas
Новости
Наклейка на лоб анализирует мозговые волны и предсказывает переутомление
Наука
Посмотрите на робота-трансформера, который меняет форму прямо в полете
Новости
Китай отправил миссию за образцами горных пород с квазиспутника Земли
Космос