Интро к Teenage Mutant Ninja Turtles (1987-1990) в 4К / Teenage Mutant Ninja Turtles (Черепашки-ниндзя) :: TMNT (Teenage Mutant Ninja Turtles, Подростки Черепашки Мутанты Ниндзя) :: Metracryg_upscale :: интро :: мультсериалы :: видео (video) :: фэндомы

Teenage Mutant Ninja Turtles мультсериалы видео интро Metracryg_upscale ...TMNT фэндомы 

Интро к Teenage Mutant Ninja Turtles (1987-1990) в 4К

По просьбе captainrob попотел над 1 минутой вступления, используя источник из этой раздачи: 

https://rutracker.org/forum/viewtopic.php?t=5524934

На всякий случай сделал еще версию с удвоенным фпс (48), людям разное нравится:

24 ФПС:

48 ФПС

Если хайвмайнду понравится, можно собирать шекели на обработку хоть всего сериала :)

Сравнение:

Teenage Mutant Ninja Turtles,Черепашки-ниндзя,TMNT,Teenage Mutant Ninja Turtles, Подростки Черепашки Мутанты Ниндзя,фэндомы,мультсериалы,видео,video,интро,Metracryg_upscale


Подробнее

Teenage Mutant Ninja Turtles (1987) intro enhanced 4K,Film & Animation,,Enjoyed my work? https://www.patreon.com/metracryg
Teenage Mutant Ninja Turtles (1987) intro enhanced 4K (48FPS),Film & Animation,,Enjoyed my work? https://www.patreon.com/metracryg
Teenage Mutant Ninja Turtles,Черепашки-ниндзя,TMNT,Teenage Mutant Ninja Turtles, Подростки Черепашки Мутанты Ниндзя,фэндомы,мультсериалы,видео,video,интро,Metracryg_upscale
Что приятнее смотреть?
24 ФПС (оригинал)
584 (43.1%)
48 ФПС
770 (56.9%)
Еще на тему
Развернуть
С этой перерисовкой теряется стиль и чёткость. Разве нейросети нельзя научить рисовать так, чтобы не превращать картинку в акварель?
EpicMan2 EpicMan2 08.06.202108:35 ответить ссылка 17.3
Это я еще неплохо навел четкость.
Вы видите изображение, увеличенное в 20 раз - соответственно все детали в 20 раз больше.
И это после удаления шумов, вертикальных помех и т.д.
Нейросеть не дорисует на столе еще три пиццы, чтобы кадр заполнить :)
Какие же раньше черепашки были кайфовые..... похоже я стал стариком (
Смотря какая нейросеть. Может после обработки пихать в следующию нейросеть копирующию стилистику?
Вы переоцениваете возможности современных нейросетей :)
А.... современное искусство...
С таким и генератор случайных чисел справится :)
Это будет адское месиво. Обычно стайл трансфер не включает временную когерентность. Временная когерентность это вообще боль, адекватно оно пока не работает.
int16 int16 09.06.202122:29 ответить ссылка 1.2
с одной поправкой вы навели резкость а не четкость, четкость это различимость мелких деталей, которых тут нет от слова совсем, потому что взяться им неоткуда, а та малость что была размазана.
Roper Roper 09.06.202120:51 ответить ссылка 1.3
А можешь шум не удалять полностью или заменять его на зернистость, просто выглядит как "мыло" ей богу. Попробуй с добавлением зерна после апскейлинга.
4CIRR 4CIRR 10.06.202101:06 ответить ссылка 0.0
Меня лично бесит зерно, но добавить его можно элементарно.
Нужно интро черепах 2003го
давай короче, в таком качестве все выпуски с 1987 года.... станешь популярным
kosar1k kosar1k 09.06.202120:27 ответить ссылка -0.6
а куда смотреть чтобы разницу увидеть?
большей плавности на 48 фпс не заметил, по-прежнему можно разглядеть переходы между отдельными кадрами исходной анимации. или это ютуб пережевал и попортил всё?
Ютуб немного жует, но не настолько.
Я тоже не особо замечаю, просто для всех выложил на всякий случай.
Я очень хорошо заметил разницу между 24 и 48. Последнее заметно плавнее и динамичнее для меня выглядит.
у тебя, наверное, i13, 4090ti и raid10 из террабайтных M.2...
на обычном ноуте вообще незаметно, а субъективно кажется, что 48 - хуже, так как не оправдывает ожиданий.
У меня ноут с i5, 1650 и 0,5 M.2 и экраном в 60 Гц.
Я уже не раз повторял, что мультики с высоким фпс выглядят как говно, но вот нашел сюжет, где профессиональный аниматор, объясняет почему они выглядит как говно
bazilikko bazilikko 08.06.202110:07 ответить ссылка 10.2
Там 24 в 60 фпс.
Я увеличиваю только кратно 2-м - тогда меньше дерганья.
Тем не менее, пока надо подождать год-другой до появления какой-нибудь Rife-app 9.0
а как ты увеличиваешь fps?
король лев, например, нарисован 12 кадров в секунду и каждый второй кадр - это предыдущий кадр + на 50% прозрачный следующий, за счёт чего экономия и плавность.
Экономия в наше время не имеет особого смысла, потому и интерлейсинг и прочие штуки не нужны.
fps интерполируются системой нейросетей с учетом движения объектов, цветового потока и прочих штучек-дрючек.
Наложение кадров - это обычный обман, плюс не особо приятный на взгляд: при быстрых движениях сплошное размытие.
В моем случае примерно так: нейросеть берет сразу несколько кадров и анализирует все, что на них происходит. На основе этого генерируются промежуточные кадры. Сцены с резкими изменениями кадра не интерполируются, а то будет каша (все настраивается в программе).
В итоге получается "честная" картинка, но не всем типам видео оно подходит.
Идеально для CG
https://grisk.itch.io/rife-app - пришлось купить, не жалею.
Нету там "честной картинки" попробуй просто запустить твои ролики, постоянно тормозя пробелом. Гарантирую, даже при таком подходе сможешь отловить несколько смазанных кадров, где непонятная каша из образов. Пример чуть ниже. При 24 кадрах этого нет, потому что там нет промежуточных кадров. Так нафига это делать то? ФПС? так нафига они нужны если в малости кадров зачастую и есть крутость произведения. Как Гоку всех порвет используя всего 8 кадров
я вот хз, даже без стопкадров 24фпс посмотрел с удовольствием, а 48фпс в первые секунд 15 уловил две кашеобразные массы и дальше не смотрел
Я могу ошибаться, но мне казалось что видео кодеки как раз так и работают, там есть ключевые четкие кадры и есть векторы движения пикселей чтоли. по этому после видео кодеков даже оригинал может быть смазанным. ИИ туда конечно добавляет в некоторых случаях говна. но мне например плавная картинка более приятна не смотря на незначительные артефакты.
кодеки по другому работают. Там ловят сходство кадров и тупо записывают что тут нихуя не изменилось, а значит инфы меньше. Вот отличное видео по ним, в том числе самым современным вариауиям
Вообще-то кодеки именно так и работают и в твоём видосике об этом просто не сказано, хоть и показано что бывает при потере основных кадров, когда остаются только кадры предсказания, работающие как раз по векторам движения. Без векторов функции предсказания не работают, а именно кадры предсказания составляют 90% видеоряда в хорошо сжатом видео.
Выдержка из статьи про H.264 с вики:
"Стандарт H.264 / AVC / MPEG-4 Part 10 содержит ряд возможностей, бла-бла-бла. Основные из них:
* Векторы движения, выводящие за границы изображения. В MPEG-2 и предшествовавших ему стандартах векторы движения могли указывать только на пикселы, находящиеся в границах декодированного опорного изображения. Методика экстраполяции за границы изображения, появившаяся как опция в H.263, включена в новый стандарт."
"Разбиение данных — функция, обеспечивающая разделение данных разной важности (например, векторы движения и другая информация предсказания имеет большую значимость для представления видеоконтента) по разным пакетам данных с разными уровнями защиты от ошибок (поддерживается не во всех профилях)."
Пример работы эффекта дропа основных кадров:
Король лев нарисован в 24 фпс, а то что ты говоришь называется "блендингом"(семплингом) и это простейший метод интерполяции после банального дублирования, который зачастую появляется при рукожопых рипах, либо в рукожопых локализациях, либо крайне редко в рукожопых оригинальных DVD 10+ летней давности выпуска. Ещё этот метод задан по умолчанию в некоторых видеоредакторах при изменении ФПС вместо дублирования кадров, а ещё 10 лет назад был задан по умолчанию во всех. Скачай топовый по сидам BD-рип Короля Льва с рутрекера 1080p и попробуй там хоть один полупрозрачный кадр поймать, я вот чёт ни одного не нашёл.
то были VHS-кассеты 20+ лет назад, и video-cd (made in usa, без перевода) около 20 лет назад, и там и там такая шняга была. при этом "король лев 2" на VHS в честных 24 фпс сделан был.
"BD-рип Короля Льва" смотреть бесполезно, это далеко не оригинал, в нём улучшали качество и картинки, и звука, прогоняя по фильтрам, и той же интерполяцией довели до 30 fps...
Не имеет значения, даже если двух-кратно.
Картинка анимирована так, что не всегда там есть 24 разных картинки на 24 кадра.
Зачастую, анимируют каждый второй, или каждый третий. Т.е. по факту там или 12 или 8 кадров, просто они повторяются.
Это полностью сбивает с толку софт, так как он расчитан на то, чтобы интерполировать не поторяющиеся кадры. Отсюды и каша.

Чтобы сделать интерполяцию более менее коректно, нужно вычленять эти вторые или третие кадры и скармливать софтине толкьо 12 или 8 кадров в секунду. Но по факту это невозможно даже если есть время на это, так как анимация на каждый 2 или третий кадр может быть скомбинирована с плавным движением камеры или фона на каждый первый кадр.
int16 int16 09.06.202122:23 ответить ссылка 0.4
Попробуйте Rife-app - все описанные вами нюансы в этой программе учтены и есть в настройках.
1) Анимировать - это своего рода искусство. Комбинация движения объектов с разным фпс в сцене и изменение фпс одного движения в течении всей сцены - это нормальные вещи. В аниме встречал даже изменение фпс персонажа с 1 до 5 дублей при том, что всё в сцене выглядело вполне гармонично и не появлялось ощущения, будто бы фпс просел, просто движение было таким, что позволяло так его анимировать.
2) При удвоении фпс с интерполяцией ломается задумка аниматоров делать резкие движения резкими, в итоге получаем мазню, особенно на переходах между сценами.
3) Ни один интерполятор не сможет полностью восстановить резкие движения. Если в одном кадре сжатый кулак, а в другом уже полностью разжатый, то морфинг вытянет из кулака разжатую руку, а не покажет разжимание пальцев.

Вывод который я уже заебался повторять:
Интерполяция существует для замедления сцен и лучше всего справляется со своей задачей, если сцена итак была плавной. А НЕ ДЛЯ БЛЯДСКОГО УДВОЕНИЯ ФПС НА ВЕСЬ СУРС!
Плавное видео без рывков вполне можно хоть удесятерять.
Да чего ты так завелся? Твои пункты 1, 2, и 3 выше и ниже в треде уже раз десять обмусолили и никто с ними не спорит.
Я же описал чуть более конкретную проблему, которая может ломать работу софта даже если закрыть глаза на 1, 2, и 3. А именно - из за дублей софт может неправильно интерпретировать движения в сцене.
Metracryg говорит, что это в программе учтено. Судя по результату не очень заметно, но возможно без этого было бы еще хуже.

Чисто теоретически, нейросети можно обучить и так, что они будут сводить проблемы 1,2,3 на нет. Проблема в том, что тогда брать за ground truth, у нас нет анифации нарисованной в 48фпс. А нейросети обученные на видео из реальной жизни будут фейлить дико по определению, так как они ожидают плавности в движениях и не ожидают дублей.
int16 int16 10.06.202109:17 ответить ссылка 0.0
В программе для фпс есть параметр "насколько кадр должен отличатся от предыдущего, чтобы считать это переходом и не интерполировать".
По умолчанию он равен 0.250 (25%).
Можно увеличить, и будет меньше искривлений, но для мульта, где все время все дергается, это равнозначно почти полному отсутствию эффекта.
Если бы людей сильно интересовал фпс, я бы этим серьезнее занялся, но оно в основном для CG роликов нормально.
Чисто теоретически когда-нибудь можно обучить нейросети абсолютно всему. Но пока имеем что имеем и навряд ли в ближайшие 10 лет что-то принципиально изменится. Интерполяцию(морфинг) видео изобрели не вчера и принципиальных улучшений за последние лет 12 я не заметил.
Тоже хотел этот видос скинуть, даже в окошке ютуба заметно как проебывается промежуточная анимация
Нейросеть не понимает контекста, и между кадрами лепит что попало..
пример почему не надо увеличивать фпс ниже
Rozyel Rozyel 09.06.202122:49 ответить ссылка 3.5
Да уж, не без этого пока :(
Как говорят правоверные слуги Омниссии: "Данные получены даже при негативном исходе опыта".
Ты их давно получил, но ничему так и не научился)
Много чему научился за последние 2 месяца.
В данном случае я выложил второй вариант просто от нефиг делать :)
Тупо просто потроллить? Ну ок, затроллел. Больше я на это не куплюсь)
Bill Ein Bill Ein 10.06.202102:59 ответить ссылка -0.6
Не потроллить, просто выложил.
Ты же видел мои ролики из Арканума и Фаллаута? Плавное видео отлично выглядит.
А со старыми мультиками нужен другой подход, если вообще нужен.
Из Арканума - более-менее, но из Фолыча - плохо.
Отстань ты от этот интерполяции уже.
Bill Ein Bill Ein 10.06.202103:07 ответить ссылка -0.6
Что в Фолыче не так?
На моментах с анимацией много перепидорашиваний интерполяционных в видосе с Фолычем.
Ну и как водится при смене вообще любой сцены видео на следующую вклинивается перепидорашивающий промежуточный интерполированный недокадр, который как бы стягивает предыдущий кадр как плёнку со следующего. Дико отвратно выглядит и дико бесит. Хоть бы вручную такие убирал.
Совет - попробуй вместо покадрового изучения просто смотреть видео для удовольствия :)
В том и проблема, что я это всё вижу при проигрывании. А раз ты и ещё около 55% голосовавших всего этого не видят, то мне остаётся лишь вам всем позавидовать :)
Теперь я понял как работает память.
Разницы с тем, что я помню из детства и "отреставрированной" версией нет.
SHshzik SHshzik 08.06.202110:07 ответить ссылка 1.4
Да, это частые позитивные комментарии: "точно, как в детстве".
Значит, цель достигнута :)
не, я помню говняное качество с 30 раз переписанных друг на друга VHS, с кучей артефактов.
А у меня наоборот, будто не аниме 80-х с его контрастно-приглушенной палитрой, а что-то современное. Особенно по конструкции Донателло это видно, которая теперь смотрится заметно простенько.
Что конечно не отменяет нужности и качества проделанной работы, спасибо, Metracryg!
Ebland Ebland 09.06.202119:39 ответить ссылка 2.3
зайди на ютуб, посмотри и признай что память тебя наебывает.
охренеть, это просто оргазм! спасибо большое!

Прикинь как будет круто, если то что ты делаешь - подтолкнет индустрию и сильно разовьется и перетечет в конечный продукт и можно будет прямо в браузере в режиме онлайна включить галочку и смотреть видео в 4к любое, даже если оно в оригинале выложено 640x480. Ну может быть, когда видяхи станут еще мощнее.

А вообще много ручной работы у тебя получается? Не хочешь оформить все в какую-то утилиту, чтобы кнопку нажал и видео обработалось от начала до конца? Что можно было другим на реакторе тоже ставить рендериться большие видосы. Ну или на продажу как приложение выставить. И как долго занимает рендер одной минуты примерно? Без дополнительной обработки и с дополнительной обработкой.

Да и вообще в целом, у тебя какая-то своя технология или ты взял готовую нейросеть?
Конечно, я пользуюсь готовыми нейросетями и другим софтом.
В зависимости от видео, сам автоматический апскейл занимает от 10% до 50% времени. Остальное - сидеть и пилить напильниками :)
Раз уж ты в этом разбираешься, то есть вопрос: что ты скажешь про SVP? Давно пользуюсь этой штукой, которая делает подобное на лету, но интересно что может сказать человек вникнувший в тему.
ltybcs ltybcs 09.06.202120:15 ответить ссылка 0.0
Я ни разу не вникнувший, просто немного гугливший :)
Плееры давно научились интерполяцию делать в реальном времени, если железо хорошее, но там очень быстрая интеполяция по паре соседних кадров, а не анализ участка видео и одновременная работа нескольких нейросетей. Такие методы хороши на плавном четком видео вроде CG мультфильмов.
48 fps разваливается между оригинальными кадрами
takezi takezi 09.06.202120:18 ответить ссылка 10.8
не. хуйня. какая-то ланкосмитчелл интерполяция
266775777 266775777 09.06.202120:31 ответить ссылка -0.3
Даже хз, я бы еще это в голосование добавил:
zzztop zzztop 09.06.202120:33 ответить ссылка 9.1
24 намного приятнее выглядит
shin kun shin kun 09.06.202121:04 ответить ссылка 3.2
Круто получилось. Дочь смотрит черепах, но на 4к ящике выглядит убого оригинал. Было бы охренительно, заполучить все серии хотябы в fulhd.
1 евро за минуту видео - это же не очень дорого? :)
Если несколько (или много) людей скинется, то получится копеечная цена.
На эту минуту у меня ушло несколько часов. Разумеется, 25-минутная серия займет меньше времени (подводные камни найдены, экспериментировать больше не надо).
Я прям захотел пересмотреть все серии.
24 выглядит смотрибельнее, но я думаю тут какой-то психологический фактор играет. Если бы я с детства смотрел телек и все телевидение было в 60 фпс, мне бы странным показался первый вариант.
Tocakyca Tocakyca 09.06.202122:14 ответить ссылка -0.1
У меня в детстве была только немецкая версия -_-. Для полной ностальгии приходится её фоном включать.
Patapum Patapum 09.06.202122:26 ответить ссылка 0.0
Куда кидать шекели то на весь сериал?
Mraque Mraque 09.06.202123:25 ответить ссылка 1.8
Пишите в личку.
Думаю, всем будет выгодно скинуться, а не поодиночке заказывать.
25 человек скинется - будет около 1 евро за серию :)
Фу, блять
Тут какая-то зловещая долина. Движение плавное, но от этого пиксельарт смотрится убого.

И стрелочки гнуться и прыгают.
int16 int16 10.06.202109:24 ответить ссылка 2.7
Это я еще левую часть отрезал ;)
Лично мне больше по душе вариант с 24 ФПС. Просто глазам комфортнее, что ли, не знаю, как еще объяснить. Хотя какое-то время назад посмотрел весь цикл "Риддика" в 60 ФПС и мне понравилось. Может это потому, что восприятие фильма и мультфильма разнится, по крайней мере у меня, может еще что-то. Но, вот так)
И в любом случае, работа проделана просто шикарная! Большое человеческое спасибо!
Только зарегистрированные и активированные пользователи могут добавлять комментарии.
Похожие темы

Похожие посты