Telegram Group & Telegram Channel
Видеореставрация. Проект Starlight: первая в истории диффузионная модель для восстановления видео

Очень интересно: Топаз поднял веки и разродился своей моделью.

Недавно обсуждали апскейлеры картинок и разницу между апскейлерами (добавление деталей, заточенность под контент, недобавление деталей и пр.).

В области апскейла видео, а не фото, Топаз, конечно, пока чемпион.

И они только что бахнули новую модель Starlight для реставрации видео.

Давайте порассуждаем в коментах про разницу между апскейлом и реставрацией, а вы пока посмотрите примеры.

Приповзресерчил насчет деталей:
Вы можете бесплатно восстановить 10-секундные видосы (лимит не знаю), а если вонзите денег за кредиты, то можно в 5-минутные видео с титрами(?!) в 1080p. Корпоративная версия будет поддерживать более длинные видео и вывод в более высоком разрешении.

"Наша первая в истории диффузионная модель для восстановления видео занимает много времени и требует больших затрат".

Не знаю насчет первой в мире, но звучит интересно и в меру хвастливо:

"Созданный на основе совершенно новой архитектуры моделей, наш подход, основанный на диффузии, использует 6B+ параметров. Это самый динамичный и широкомасштабный метод улучшения видео. Видео ухудшается из-за артефактов сжатия, размытия, алиасинга, шума, атмосферных искажений, недостающих пикселей и т. д.
Каждый кадр страдает от уникальных типов повреждений, что делает восстановление видео с помощью искусственного интеллекта очень сложной задачей.
Наша технология решает эту проблему, анализируя сотни кадров для точного восстановления деталей, обеспечивая непревзойденное восстановление деталей в сочетании с беспрецедентной временной согласованностью."

Полностью автоматическая реставрация: модель автоматически денойзит, деблюрит, повышает резолюшн и анти-алиасит (язык и глаза сломались, да). Никаких ручных настроек, никакой настройки параметров (очень круто, как по мне).

Пока нет ничего, кроме Coming soon и закрытой беты для тестирования.

И тут повод развязать дискуссию в коментах о том, что диффузия добавляет детали, которые порой неуместны (ненужные эмоции, например) и что это уже креативная реставрация в духе магнифика, а не старый добрый наукоемкий топаз. Но надо смотреть в деле, а пока ждем и дискутируем.

@cgevent



group-telegram.com/cgevent/11088
Create:
Last Update:

Видеореставрация. Проект Starlight: первая в истории диффузионная модель для восстановления видео

Очень интересно: Топаз поднял веки и разродился своей моделью.

Недавно обсуждали апскейлеры картинок и разницу между апскейлерами (добавление деталей, заточенность под контент, недобавление деталей и пр.).

В области апскейла видео, а не фото, Топаз, конечно, пока чемпион.

И они только что бахнули новую модель Starlight для реставрации видео.

Давайте порассуждаем в коментах про разницу между апскейлом и реставрацией, а вы пока посмотрите примеры.

Приповзресерчил насчет деталей:
Вы можете бесплатно восстановить 10-секундные видосы (лимит не знаю), а если вонзите денег за кредиты, то можно в 5-минутные видео с титрами(?!) в 1080p. Корпоративная версия будет поддерживать более длинные видео и вывод в более высоком разрешении.

"Наша первая в истории диффузионная модель для восстановления видео занимает много времени и требует больших затрат".

Не знаю насчет первой в мире, но звучит интересно и в меру хвастливо:

"Созданный на основе совершенно новой архитектуры моделей, наш подход, основанный на диффузии, использует 6B+ параметров. Это самый динамичный и широкомасштабный метод улучшения видео. Видео ухудшается из-за артефактов сжатия, размытия, алиасинга, шума, атмосферных искажений, недостающих пикселей и т. д.
Каждый кадр страдает от уникальных типов повреждений, что делает восстановление видео с помощью искусственного интеллекта очень сложной задачей.
Наша технология решает эту проблему, анализируя сотни кадров для точного восстановления деталей, обеспечивая непревзойденное восстановление деталей в сочетании с беспрецедентной временной согласованностью."

Полностью автоматическая реставрация: модель автоматически денойзит, деблюрит, повышает резолюшн и анти-алиасит (язык и глаза сломались, да). Никаких ручных настроек, никакой настройки параметров (очень круто, как по мне).

Пока нет ничего, кроме Coming soon и закрытой беты для тестирования.

И тут повод развязать дискуссию в коментах о том, что диффузия добавляет детали, которые порой неуместны (ненужные эмоции, например) и что это уже креативная реставрация в духе магнифика, а не старый добрый наукоемкий топаз. Но надо смотреть в деле, а пока ждем и дискутируем.

@cgevent

BY Метаверсище и ИИще


Share with your friend now:
group-telegram.com/cgevent/11088

View MORE
Open in Telegram


Telegram | DID YOU KNOW?

Date: |

Two days after Russia invaded Ukraine, an account on the Telegram messaging platform posing as President Volodymyr Zelenskiy urged his armed forces to surrender. Following this, Sebi, in an order passed in January 2022, established that the administrators of a Telegram channel having a large subscriber base enticed the subscribers to act upon recommendations that were circulated by those administrators on the channel, leading to significant price and volume impact in various scrips. The regulator said it has been undertaking several campaigns to educate the investors to be vigilant while taking investment decisions based on stock tips. Multiple pro-Kremlin media figures circulated the post's false claims, including prominent Russian journalist Vladimir Soloviev and the state-controlled Russian outlet RT, according to the DFR Lab's report. Pavel Durov, a billionaire who embraces an all-black wardrobe and is often compared to the character Neo from "the Matrix," funds Telegram through his personal wealth and debt financing. And despite being one of the world's most popular tech companies, Telegram reportedly has only about 30 employees who defer to Durov for most major decisions about the platform.
from fr


Telegram Метаверсище и ИИще
FROM American