Новости 9 декабря 2021

Новая технология в 2 раза повышает разрешение видео, убирает шумы и дефекты

Появилась новая технология NeuroHD, которая делает разрешение видео в два раза выше, а также восстанавливает детали и убирает шумы на изображении.

Читайте «Хайтек» в

Новая нейросетевая технология появилась в VK Видео. Благодаря NeuroHD можно смотреть в высоком разрешении, и любительский контент, и профессиональные ролики. Планируется, что все ролики из библиотеки VK Видео получат высокое разрешение — сейчас туда загружают более 250 млн видео в год.

Технология обеспечивает преобразование видеороликов на real-time скорости и обладает высокой производительностью для эффективного использования вычислительных мощностей платформы и клиентских устройств. В NeuroHD нам удалось найти уникальное сочетание настроек модели, данных для обучения и инфраструктурных решений.
Александр Тоболь, CTO ВКонтакте, VK Видео и VK Звонков

В основе NeuroHD — это нейросеть из семейства генеративно-состязательных сетей (GAN). Во время ее обучения используют две модели, одна из них генерирует увеличенные изображения, а другая — проверяет сгенерированные изображения, чтобы они не отличались от настоящих.

Также в нейросети есть специальные элементы временной консистентности, благодаря этому можно улучшить кадр на основе информации о соседних фрагментах.

Видео с повышенным разрешением уже доступны в ряде групп и публичных страниц ВКонтакте. Их список постоянно расширяется: администратор любого сообщества может отправить запрос, чтобы улучшить качество видео. Для этого достаточно заполнить форму.