Компания Nvidia и ученые из MIT представили искусственный интеллект, который может убирать с фотографий шумы. Описание нейросети опубликовано в блоге Nvidia, при этом исходный код алгоритмов компания не стала выкладывать в открытый доступ, хотя подобное часто происходит с аналогичными системами.
Нейросеть может не только очистить снимки от мелкого шума из-за слабого освещения или от цветного шума на старых снимках, но и убрать с фотографий надписи, подписи и, возможно, даже копирайт. При этом алгоритму не нужно видеть эту фотографию без шумов — для начала работы нейросети достаточно просто показать некачественные снимки.
Компания обучила нейросеть на базе из 50 тыс. испорченных фотографиях, с которых в последствии были удалены шумы. «Можно научить нейросеть восстанавливать части фотографии, чтобы алгоритм даже не видел ее исходное значение. При этом производительность компьютера совсем не увеличивается, как и время для обработки», — говорят создатели алгоритма.
Этот метод можно использовать не только при обработках художественных фотографий, но и для удаления шумов из снимков МРТ и улучшению медицинской или космической визуализации.
В мае компания Nvidia представила искусственный интеллект, который может восстанавливать поврежденные фрагменты изображения, а также редактировать недостающие детали. При этом нейросеть самостоятельно понимает, какую деталь необходимо дополнить к изображению.
Недавно искусственный интеллект от Google научился не только раскрашивать объекты на черно-белых видеозаписях, но и отслеживать перемещение этих предметов. «Отслеживание объектов в видео — фундаментальная проблема в компьютерном зрении», — говорил ведущий разработчик проекта Карл Вондрик. Нейросеть компании учится следить за отдельными объектами через окклюзии, при этом они стабилизируются, а искусственный интеллект может запоминать их без заранее заданных меток с этим объектом на кадрах.