Студенты разработали очки, которые анализируют речь и дают подсказки пользователю

Студенты Стэнфордского университета разработали очки, которые используют дополненную реальность и ИИ, чтобы помогать пользователю поддерживать диалог. О разработке пишет Interesting Engeneering.

Студенты Стэнфордского университета разработали очки, которые «слушают ваш разговор и точно говорят вам, что сказать дальше». Устройство умеет распознавать лица, чтобы использовать историю сообщений с конкретным человеком для моделирования разговора. Разработчики описали принципы и показали работу устройства в своем Twitter.

Очки с искусственным интеллектом rizzGPT связываются через Bluetooth с веб-приложением на главном устройстве, которым может быть телефон пользователя. Когда пользователь говорит или участвует в разговоре, звук преобразуется в текст в режиме реального времени. Устройство использует систему распознавания речи Whisper от OpenAI. На основе полученных данных система предлагает возможные ответы на заданные вопросы.

В основе разработке умные очки Monocle AR, разработанные компанией Brilliant Labs. Они используют микрофон, дисплей с высоким разрешением и камеру для взаимодействия с пользователем и окружением. 

https://hightech.fm/wp-content/uploads/2023/04/ssstwitter.com_1681989998420.mp4
Демонстрация работы устройства. Видео: Bryan Hau-Ping Chiang
https://hightech.fm/wp-content/uploads/2023/04/ssstwitter.com_1681990020657.mp4
Демонстрация работы устройства. Видео: Bryan Hau-Ping Chiang

В видеодемонстрации один из участников задает вопросы пользователю очков. Система интерпретируют вопрос и с небольшой задержкой генерирует ответ, который отображается на стеклянном экране. Все это происходит за долю секунды. Разработчики отмечают, что скорость транскрипции зависит от скорости Wi-Fi или мобильного интернета на основном устройстве.

Устройство вряд ли подойдет для реального использования в повседневной жизни. Прототип должен быть модернизирован, чтобы увеличить время автономной работы, уменьшить вес и сделать его менее громоздким и удобным в использовании.


Читать далее:

Новый солнечный элемент бьет мировой рекорд эффективности

Сегодня вечером на Землю упадет старый спутник НАСА: агентство сообщило о рисках

Послушайте, как звучит солнечная плазма, которая обрушивается на Землю

Изображение на обложке: Bryan Hau-Ping Chiang

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Процессорный модуль «Фишт» запустили в производство: заменит зарубежные аналоги  
Новости
НАСА сообщило о возможных следах древней жизни на Марсе  
Космос
Робот TRON 1 научился прыгать через барьеры и взбираться по лестницам  
Новости
Проект мощнейших в мире приливных турбин запустили во Франции
Новости
Суперкомпьютер раскрыл тайны «молекулярного ремонта» ДНК
Наука
В Китае разработали батарейку с радиоактивным углеродом, которая проработает до 100 лет
Наука
Ученые MIT разработали «простой способ» превратить клетки кожи в нейроны
Наука
Microsoft запускает ИИ Copilot для геймеров: он будет работать, как тренер
Новости
Частный лунный модуль сфотографировал солнечное затмение с Луны
Космос
Почему Вселенная несимметрична: физики приблизились к разгадке тайны
Новости
Посмотрите на обратную сторону спутника Марса: это второе фото в истории
Новости
Это приложение буквально заставляет трогать траву и блокирует соцсети
Новости
Посмотрите на место гибели лунного аппарата «Афина»
Новости
Apple призвала срочно обновить iPhone из-за критической уязвимости  
Новости
В РосНИИРОС опровергли планы ICANN закрыть домен .su  
Новости
Европейские охотники каменного века «путешествовали» по морю в Африку
Наука
Зонд «Гера» сделал снимки спутника Марса на пути к «пострадавшему в ДТП» астероиду
Космос
В испанской пещере нашли «фрагменты лица» древнейшего жителя Западной Европы
Наука
Стартап представил робота, который готовит как шеф-повар лучших ресторанов
Новости
В паровом реакторе впервые зажгли термоядерную плазму
Новости