Нейросеть научилась искать объекты на изображении по голосовому описанию

Исследователи из Массачусетского технического университета (MIT) создали алгоритм, способный распознать объекты на изображении на основе их простого речевого описания без дополнительных пояснений. Об этом пишет Engadget.

Существующие системы распознавания речи требуют множество аннотаций и транскрипций для эффективного выполнения задач. Разработанная инженерами из MIT система работает проще — например, ей достаточно сказать «синяя рубашка», и ИИ найдет объект на изображении.

Система состоит из двух нейросетей — первая делит изображение на сетку из маленьких ячеек, а вторая разделяет звуковую спектрограмму на короткие отрезки по одной-две секунды. Затем ИИ проверяет, насколько точно аудиодорожка соответствует изображению в сетке.

Ученые полагают, что разработка может использоваться для создания переводчиков, способных распознать язык и подобрать подходящий перевод с точностью до 100%.

Искусственный интеллект от MIT по речи поймет, есть ли у человека депрессия

Ранее инженеры из Лаборатории компьютерных наук Массачусетского технологического института создали искусственный интеллект, способный определить структуру и назначение объекта, с которым алгоритм никогда раньше не сталкивался. Разработка позволит сделать роботов действительно эффективными помощниками на производстве и дома.

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Посмотрите на маневренный дрон с крыльями, как у белки-летяги
Новости
Недалеко от Земли нашли странную группу молодых звезд, стремящихся разлететься в разные стороны
Космос
Летучие мыши учатся подслушивать за сексом лягушек, чтобы выбрать добычу
Наука
В МФТИ разработана технология для создания долговечной памяти электронных устройств
Наука
Зонд «Юнона» рассмотрел холодный северный полюс Юпитера
Космос
Роботы-собаки Unitree стреляют водой на 60 метров, чтобы тушить пожары
Новости
Самки бонобо научились держать самцов «в узде»: как им удалось
Наука
Снайперы застрелили с вертолетов 700 коал: власти Австралии объяснили, зачем это сделали
Наука
Бесплатную смену по подготовке к ЕГЭ проведут в Университете Иннополис 
Новости
Назван неожиданный напиток, который может снизить риск остановки сердца
Наука
Эффективность российской вакцины от пыльцы проверят уже в этом году
Наука
Назван необычный побочный эффект вакцин от гриппа: он встречается у женщин
Наука
Большой Ку: тестируем бюджетный QLED-TV с огромной диагональю
Технологии
Посмотрите на первый полет МС-21 с новыми российскими системами
Новости
Натрий-ионные аккумуляторы: плюсы и ограничения технологии
Технологии
Amazon запустил первые спутники для альтернативы Starlink
Космос
Зонд НАСА ищет темную материю в короне Солнца
Космос
Ученые выяснили, как мозг детей с аутизмом обрабатывает звуки
Наука
Неудачная советская миссия вернется на Землю после полувека в космосе
Космос
Рыбу, которую долгое время считали вымершей, сняли у побережья Индонезии
Наука