Сообщить об ошибке на сайте
URL
Ошибка
Обучение машин

Новое исследование специалистов Google Brain, Университета Кэмбриджа, Института Макса Планка и Калифорнийского университета в Беркли описывает метод, при помощи которого робот может понять, приведут ли его действия к необратимым последствиям.

Обучение с подкреплением во многом напоминает процесс обучения ребенка — регулярное повторение оттачивает технику. Однако, для того чтобы преимуществами этого метода мог воспользоваться робот, ему требуется вернуть в исходное состояние среду, в которой проходит обучение, а это трудоемкая задача, на выполнение которой у людей может уходить по несколько часов.

По словам авторов исследования, озаглавленного «Leave no Trace» («Не оставляя следов») и опубликованного в онлайн-архиве Корнеллского университета, они пытались развить у машин «интуицию», чтобы они могли классифицировать все, что подлежит восстановлению, как безопасные действия. Путем проб и ошибок робот открывает все больше и больше действий, которые можно обратить, отделяя их от необратимых, а значит — непригодных для обучения.

Обучение с подкреплением часто выполняется в реальных условиях испытательного полигона, например, когда беспилотный автомобиль движется по горному серпантину, и такие условия не прощают серьезных ошибок. Поэтому многие исследователи предпочитают виртуальные симуляции, но даже им рано или поздно приходится проводить реальные испытания, а с помощью нового алгоритма этот процесс станет быстрее и безопаснее, пишет MIT Technology Review.

Эта работа перекликается с другим исследованием, вышедшем в прошлом месяце и принадлежащем специалистам Facebook AI Research. В нем у одной машины есть два различных режима, Элис и Боб, один из которых пытается вернуть в исходное состояние то, что сделал другой. Такая система позволяет ИИ планировать заранее свои действия, уберегая себя (и нас) от разрушительных последствий.

Когда обучение с подкреплением не дает желаемых результатов, в ход идет любознательность. Такую модель разработали для ИИ специалисты Университета Беркли, научив его действовать не ради вознаграждения, а для удоволетворения любопытства.

Подписывайтесь на наши каналы в Telegram

«Хайтек» - новости онлайн по мере их появления

«Хайтек» Daily - подборки новостей 3 раза в день

«Настроить системы умного дома уже не сложнее, чем установить Windows»
Умный дом
«WorldSkills — отличный пункт в резюме»
Иннополис
Китайцы с высоким рейтингом смогут арендовать электрокар у Alibaba
Тренды
ИИ-рынок вакансий обещает каждому найти работу
Идеи
Крупнейшие компании помогут IBM коммерциализировать квантовый компьютер
Тренды
Чистый транспорт
В Австралии запустят первый поезд на солнечной энергии
Робот-морская звезда мгновенно адаптируется к неожиданным повреждениям
Робототехника
BAIC прекратит производство автомобилей с ДВС к 2025 году
Тренды
Криптовалюты
«Биткойн провалился как валюта»
Илон Маск: «Общественный транспорт — это полный отстой»
Мнения
ИИ-версия поттерианы: «Гарри отвел глаза от головы и бросил их в лес»
Искусственный интеллект
Во Франции запретят Facebook детям до 16 лет
Социальные сети
В США отменили сетевой нейтралитет
Кейсы
Новая технология Alphabet X подключит к интернету миллионы индийцев
Интернет для всех
Разработан устойчивый электровелосипед для пожилых
Транспорт будущего
Биотех-стартап Ginkgo Bioworks стал «единорогом»
Биотехнологии
В Китае с поддельной едой будут бороться с помощью блокчейна
Блокчейн
Daimler начал поставки городских электрогрузовиков в Европе
Тренды
Дания использует криптовалюту для помощи развивающимся странам
Блокчейн
Эндрю Ын займется внедрением ИИ на фабриках
Искусственный интеллект
Распознавание лиц
Китайские камеры слежения засекли журналиста ВВС за 7 мин
Thor Trucks — новый конкурент электрогрузовика Tesla Semi
Электротранспорт
К 2021 году самолеты на 75% будут состоять из напечатанных деталей
Кейсы
«Биологические часы» помогут подобрать персональное лечение
Медицина будущего
Создан микрочип, который почти невозможно взломать или разрушить
Кибербезопасность
Кейсы
Российские инженеры напечатали компактный двигатель для дронов
В Нью-Йорке создадут первую в мире цифровую систему энергоснабжения
Идеи
«Батареи для электрокаров перестанут дешеветь после 2020 года»
Электромобили
Сотрудники Tesla: «90% автомобилей Model S и Model X выходят с дефектами»
Мнения
В России учет алкоголя переводят на блокчейн
Тренды
Термоядерный синтез
«Реактор на основе водорода и бора будет готов в течение 10 лет»
Китай собирает ДНК граждан под видом бесплатной меддиагностики
Тренды
Стартап ObEN создает реалистичных 3D-аватаров
Кейсы
Робототехника вызвала бум электродвигателей
Робототехника
«До Скайнета еще далеко, но все же лучше к нему подготовиться»
Мнения
Идеи
Светящиеся растения заменят фонари и светильники
Вертикальные фермы Local Roots обещают прокормить космонавтов
Еда будущего
Ученые из МГУ разработали и протестировали квантовый телефон
Квантовые технологии
Солнечная энергетика в США заменит 10 ГВт газовых электростанций
Тренды
Toyota и Panasonic объединились для разработки батарей для EV
Аккумуляторы
Создан новый тип вентиля для квантового компьютера
Квантовые технологии
Технологию автономных имплантов подсмотрели у электрических угрей
Импланты
Aurora передала военным систему автопилота для вертолетов
Беспилотная авиация
Блокчейн
Криптокотята на блокчейне выгоднее, чем пенсионные накопления
«ИИ разрушает нашу свободу воли»
Искусственный интеллект
Южная Корея запретит банкам проводить операции с криптовалютами
Блокчейн
Китай собирается создать в стране 290 «умных городов»
Умные города
Криптомания привела к рекордному росту эфира и лайткойна
Криптовалюты
ЗОЖ предотвращает смертность раковых больных на 40%
Борьба с раком