Сообщить об ошибке на сайте
URL
Ошибка
Искусственный интеллект

Искусственный интеллект готов потеснить даже шумовиков — специалистов, которые записывают шумовые эффекты для кино и видеороликов. Разработанная учеными из МТИ нейросеть самостоятельно записала к беззвучному видео подходящие аудиодорожки и прошла звуковой тест Тьюринга — люди не смогли отличить синтезированные звуки от настоящих. О разработке пишет Engadget.

Ученые из лаборатории компьютерных наук и ИИ (CSAIL) записали видеоролики, на которых они ударяют барабанной палочкой по различным предметам, включая кусты, заборы и металлические решетки. Всего было подготовлено 978 видеороликов, на которых выполнялось 46620 различных действий. Все эти данные были предоставлены алгоритму на основе глубокого машинного обучения.

Разработанная в МТИ нейросеть самостоятельно определяет, как звук соотносится с визуальным рядом и составляет конкретные паттерны. ИИ успешно может отличить постукивание по камням от постукивания по листьям или по диванной подушке. Он также в 67% случаев отличает мягкий предмет от твердого.

Как только алгоритму демонстрируют новое видео уже без звука, он оценивает каждый отдельный кадр видеоролика и сопоставляет аудиодорожку с базой данных (она получила ироничное название Greatest Hits). После этого компьютер генерирует звуки для видео, причем синтезирует их самостоятельно, а не берет из базы данных.

Ученые проверили, сможет ли алгоритм обмануть человека. Они провели онлайн-исследование и попросили респондентов определить, реален ли звук на видео. Аудио, сгенерированное искусственным интеллектом, казалось участникам опроса реальным в два раза чаще, чем оригинальная звуковая дорожка.

Алгоритм пока нельзя назвать совершенным: он еще не отличает настоящий удар по предмету на видео от имитации удара, а также не может воспринимать звуки в отрыве от визуального ряда. Однако ученые из МТИ считают, что это только начало, и скоро ИИ смогут действовать так же эффективно, как и профессиональные шумовики.

Подписывайтесь на наши каналы в Telegram

«Хайтек» - новости онлайн по мере их появления

«Хайтек» Daily - подборки новостей 2 раза в день

перейдите по одной из ссылок и нажмите кнопку Join
Новая технология позволит редактировать гены клеток мозга
Исследования мозга
МТИ начал выдавать дипломы на блокчейне
Блокчейн-технологии
К концу года мощность солнечной энергетики Китая достигнет 50 ГВт
Тренды
Тим Кук лично ответил поклоннику Mac mini о будущем модели
ИТ-компании
Тренды
Amazon станет первой в мире компанией, которая стоит $1 трлн
Молекулы-самоубийцы могут защитить нас от рака
Борьба с раком
Blue Origin впервые провела огневые испытания своего двигателя BE-4
Частный космос
Уникальная бетонная крыша превращает жилой дом в электростанцию
Солнечная энергетика
Toyota Sora — новый водородный автобус для гостей Олимпийских игр
Транспорт будущего
Ученые создали двумерный «идеальный» транзистор
Новая электроника
Huawei добилась 20 Гбит/с в испытаниях 5G Dual Connectivity
Переход на 5G
Сингапурские ученые делают фотоэлементы из меди, цинка и олова
Энергия солнца
Транспорт будущего
Маск купил еще одну буровую машину и роет тоннель в Вашингтон
В Швеции выбрали место для строительства конкурента Gigafactory
Тренды
Россия получила рекордное количество медалей на World Skills 2017
Кейсы
Эндрю Ын возглавил стартап, разрабатывающий чатбота-психотерапевта
Кейсы
Блокчейн может трансформировать сферу туризма
Блокчейн-технологии
Водоросли помогли улучшить органические солнечные элементы
Солнечная энергия
Veo Robotics переложит тяжелый труд на плечи роботов
Робототехника
Соцпособия будущего
Блокчейн и криптовалюты совершат революцию в БОД
Flare — камера слежения с ИИ для умного дома
Умный дом
Разработана компьютерная память молекулярного уровня
Компьютерная память
5 открытий в сфере гравитационных волн, которые изменили астрофизику
Астрофизика
4 фактора, которые преобразят IoT
Интернет вещей
Синтезирован препарат, эффективно подавляющий ВИЧ
Лечение ВИЧ
«Вертолеты России» покажут электрический конвертоплан в 2019 году
Городская авиация
Идеи
Toyota создала водородный минивэн с дальностью хода 1000 км
Число криптовалютных хедж-фондов перевалило за сотню
Тренды
Тренды
В США стартует первый государственный эксперимент с выплатой БОД
В Китае открыли роботизированную промзону за $300 млн
Промышленная робототехника
В Канаде начали тестировать робомобили на дорогах общего пользования
Беспилотные автомобили
В Шотландии запущена первая плавучая ветровая ферма
Ветровая энергетика
Робот-садовник поливает и защищает растения от вредителей
Робототехника
Виталик Бутерин: «Центробанкам еще далеко до введения криптовалют»
Криптовалюты
Электромопед от Honda станет домашней системой хранения энергии
Электромотоциклы
Eviation обещает запустить авиационный Uber в 2019 году
Электроавиация
Роберт Уразов: «На смену дипломам приходят паспорта навыков»
Тренды
Биосфера
Ученые не могут объяснить резкое сокращение числа летающих насекомых
Китай выпустит 1 млн электромобилей в 2018 году
Электромобили
ИИ от DeepMind стал гроссмейстером по игре го за 3 дня
Искусственный интеллект
Центробанк Бразилии признал биткойн финансовой пирамидой
Криптовалюты
«Мозги» беспилотной системы Apple размещаются на крыше автомобиля
Беспилотный транспорт
Новое открытие приближает появление квантовых компьютеров
Нанотехнологии
В 2018 году Baidu запустит в Китае беспилотный автобус
Беспилотный транспорт
Garmin Speak — умный автонавигатор с Alexa
Умный автомобиль
Daimler показала, на что способны ее беспилотные грузовики
Беспилотный транспорт
Рейтинг лучших
11 главных инженерных инноваций 2017 года
Электробайки Zero станут в 2018 году быстрее, мощнее, выносливее
Транспорт будущего
Samsung хочет подключить всю бытовую технику к IoT
Интернет вещей