Адрес для входа в РФ: exler.world
Москва 1896 год
24.04.2020 10:45
14340
Комментарии (110)
Сейчас появляется все больше и больше старых архивных кинороликов, обработанных с помощью нейронных сетей. Для этих роликов делается увеличение разрешения с программной обработкой (upscale), увеличивается частота кадров до 60 fps (простым дублированием кадров, как я понимаю), делается ретушь - убираются шумы и артефакты. Результаты более чем впечатляют.
Вот, например, Москва, Тверская, 1896 год.
А это - рабочие в северной Англии, 1901 год.
Войдите, чтобы оставить комментарий.
Интересно, в 1901 у бедных деревянная обувь на вид.
Для увеличения FPS используется технология motion vectors (она же применяется практически во всех современных алгоритмах сжатия). Для блоков пикселей (в пределе - для каждого) рассчитывается, куда каждый из них "двинется" на следующем кадре или нескольких и насколько изменится его яркость по каждому каналу. Соответственно, зная исходную и конечную точки - можно создать сколько угодно промежуточных.
Да вы на лица посмотрите кто поодаль - обезьяны обезьянами! Не естественные совершенно
известный же прием
про экстраполяцию на 60 фпс ясно
Откуда берется цвет -- неясно. Из серии, "а давайте раскрасим в ХХХ цвет".
Откуда берется цвет -- неясно. Из серии, "а давайте раскрасим в ХХХ цвет".
неясно. Из серии, "а давайте раскрасим в ХХХ цвет".
Я думаю, не надо останавливаться на этом. Камера должна подойдти ко всем людям, представиться корреспонднтом Ведомостей, и взять интервью про то, что они думают про грядущую революцию, и как к ней готовятся. После этого сказать, что они восстановили реальность, которой никто раньше не знал. Я думаю, что нейросети справятся.
"обычно такие предметы бывают такого цвета".
Хм, я о чем... сняли анимационный фильм по мотивам и назвали его восстановленной реальностью. Ну ОК.
нейросеть такого не восстановит.
анимационный
Восстановит непрвильное слово, dude. "Придумает".
использует цвет со сходного материала
Находит посты Алекса У за последние 2 года и делает копипасту в новых постах по ключевым словам
дерусь потому что дерусь?
Нужно ещё понимать, что восстановление нейросетями - это палка о трёх концах. Восстановление может быть некорректным (что не очень, но вполне вероятно), а цвет может быть выбран полностью неверным (что более чем вероятно). Но на первый взгляд - впечатляет, да.
Вот здесь чуть подробнее, с наглядными примерами: habr.com
Вот здесь чуть подробнее, с наглядными примерами: habr.com
А вот на Тверской всего 3-4 бабенки среди толп мужиков. Вот те нравы то какие были, загляденье...
Вам приятнее смотреть на мужиков?! 😄
бруTальные мужики причем, в сапожищах все.
бруTальные мужики причем, в сапожищах все.
С налипшим на сапоги навозом?
На 0:42 Ленин идет!!
На 0:42 Ленин идет!!
На Тверской?
Стоп!
Тверская....
От проститутки?
Брать телеграф.
Брать телеграф.
Там женщин больше, и все длинноногие.
увеличивается частота кадров до 60 fps (простым дублированием кадров, как я понимаю),
Недостающие кадры экстраполируются. Т.е. на базе существующих кадров генерируются недостающие для повышения fps.
В противном случае не получится такая плавность движения.
Для примера вот ещё ролик 50 fps против (сколько там в мультах обычно?) 15...
Ни хрена никакой разницы не заметил.
По-моему, явно видно, что 50 фпс плавнее.
согласен про экстаполяцию, я тоже так делаю с картинками для микроскопии.
прикольно, что клип ты именно про Чебурашку показал 😄
прикольно, что клип ты именно про Чебурашку показал 😄
))))))
Если говорить о хронике прошлых лет, то в свое время меня просто шокировал фильм
"Вторая мировая в 3D" . У кого есть соотв. телики или мониторы советую найти на трекере ISO этого диска и посмотреть. Там рассказ о том, что в германии 30х-40х годов делались эксперименты с 3D фотографией и многие события тех лет cнимались на 3D фото.
Вот там фото со всяких съездов нацистской партии c участием Гитлера и т.д. Когда ты буквально оказываешься следи частокола вздернутых вверх рук это производит впечатление, потом еще немного военных фото, но там уже меньше эффект. Короче, кому интересно - впечатление гарантирую, такого вы еще не видели...
"Вторая мировая в 3D" . У кого есть соотв. телики или мониторы советую найти на трекере ISO этого диска и посмотреть. Там рассказ о том, что в германии 30х-40х годов делались эксперименты с 3D фотографией и многие события тех лет cнимались на 3D фото.
Вот там фото со всяких съездов нацистской партии c участием Гитлера и т.д. Когда ты буквально оказываешься следи частокола вздернутых вверх рук это производит впечатление, потом еще немного военных фото, но там уже меньше эффект. Короче, кому интересно - впечатление гарантирую, такого вы еще не видели...
Если говорить о хронике прошлых лет, то в свое время меня просто шокировал фильм"Вторая мировая в 3D" .
а как оказалось эксперименты еще чуть ли не в начале 20 века делались
Количество фуражек просто поражает (сейчас это слово и не каждый вспомнит).
Картузов, если быть точным.
Тогда без картуза выйти - позор:)
А вот это слово точно никто не помнит. Даже заинтриговала разница. Фрак, сюртук и редингот ещё отличу.
Смокинг же ещё.
Не курю.
Ещё.
косметику неплохо наложил.
А что до детализации... Когда нейросети научатся вот такое делать:
вот тогда ой.
вот тогда ой.
Когда зарабатывал ретушью фотографий, постоянно делал подобное. Я называл это "слепить франкенштейна". У меня даже где-то на старом диске валяется база глаз, носов, подбородков и ушей.
Так умеют же уже. Ведь уже есть виртуальные умершие актеры.
Когда зарабатывал ретушью фотографий, постоянно делал подобное. Я называл это "слепить франкенштейна". У меня даже где-то на старом диске валяется база глаз, носов, подбородков и ушей.
По-настоящему впечатлило:
Вот это спасибо, что напомнили. В свое время слышал об этом фильме, хотел посмотреть, но потом позабыл. Пошел качать и смотреть...
Да! Атака танков - это нечто!..
Атака танков
Этак скоро и номера машин можно будет увеличивать
На 4:24 в английском ролике парень показывает камере неприличный жест (тогда это средний и указательный палец, ладонью к себе). Ну ничего не изменилось за 100 лет ?
Виктория же, нет?
Угроза. У лучников отсекали два пальца.
Виктория же, нет?
Виктория - ладонью от себя и только со времен 2-й мировой, к тому же.
Виктория же, нет?
Виктория - ладонью от себя
А если боком?
Интересно, что все мужчины, кроме пары человек в Британии, в головных уборах.
Интересно, что все мужчины, кроме пары человек в Британии, в головных уборах.
Интересно, что все мужчины, кроме пары человек в Британии, в головных уборах.Как и в России. Волосы не мыли, вот и приходилось для красоты кепки носить.
За версию с грязными волосами спасибо, разумное объяснение традиции.
В Англии человек без головного убора мог быть привлечен за бродяжничество.
У нас здесь все можно. Нельзя только не иметь крыши
над головой и ходить по улице без рубашки, без шляпы или без башмаков.
Каждого, кто нарушит это правило, полицейские ловят и отправляют на Дурацкий
остров. Считается, что если ты не в состоянии заработать себе на жилище и на
одежду, значит, ты безнадежный дурак и тебе место как раз на острове
Дураков.
над головой и ходить по улице без рубашки, без шляпы или без башмаков.
Каждого, кто нарушит это правило, полицейские ловят и отправляют на Дурацкий
остров. Считается, что если ты не в состоянии заработать себе на жилище и на
одежду, значит, ты безнадежный дурак и тебе место как раз на острове
Дураков.
Волосы не мыли, вот и приходилось для красоты кепки носить.
За версию с грязными волосами спасибо, разумное объяснение традиции.
Время было такое. Все были евреями.
Или все они - евреи.
В Англии человек без головного убора мог быть привлечен за бродяжничество.
В Англии человек без головного убора мог быть привлечен за бродяжничество.
У англичан какие то странные ботинки у всех. Будто голландские башмаки.
И дети с такими мешками под глазами, будто кажутся карликами, а не детьми... Хотя это может особенности реставрации.
И дети с такими мешками под глазами, будто кажутся карликами, а не детьми... Хотя это может особенности реставрации.
жизнь нелегкая На заводе? или уже отменили детский труд?
Мужик, в московской хронике, который слева появляется, в светлом плаще, в тройке и с зонтом-тростью, прямо франт – сильно выделяется на общем ч/б (даже в цветной версии) фоне 😄
А в английском ролике. нейросеть человеков в зомби превратила.
А в английском ролике. нейросеть человеков в зомби превратила.
Меня поразило, что он не запахивает ветром откинутую полу плаща. Типа "грация превыше каких то мелочей жизни". 😄
прямо франт – сильно выделяется на общем ч/б (даже в цветной версии) фоне
Вачовски при съемке этого эпизода на кастинг пригласили множество близнецов, а герла — модель с глянцевых журналов.
Для меня революция 1917 года является такой катастрофой для России, что я всегда, когда встречаюсь с чем то дореволюционным , считаю года до революции (21 год), а эти люди или вещи кажутся мне совершенно невозможными, как инопланетяне , "унесёнными ветром".
Текст по силе перебивший нетленное: "За окном шел дождь и рота солдат".
"Кто на ком стоял?"...
"Кто на ком стоял?"...
Понравился текст видно, что не поленились написать мне херню, чтоб хоть как то отметиться.
Понравился текст видно, что не поленились написать мне херню, чтоб хоть как то отметиться.
Ну не можешь ты в сложноподчиненные предложения - будь проще.
Для меня революция 1917 года является такой катастрофой для России,
Те же чуЙства. Ходят люди и не знают, сколько интересного у них будет в ближайшие 20-30 лет.
Ходят люди и не знают, сколько интересного у них будет в ближайшие 20-30 лет.
Не Ленин виноват в произошедшем. Он только подхватил лежащую власть. И не факт, что крови было бы меньше, не сделай он этого.
Только не рота солдат, а рота красногвардейцев;)
Или разные варианты существуют?
Или разные варианты существуют?
Не Ленин виноват в произошедшем. Он только подхватил лежащую власть.
Опередили.
Ходят люди и не знают, сколько интересного у них будет в ближайшие 20-30 лет.
- Джин, хочу чтобы у меня всё было.
- ОК, мужик. У тебя всё было.
- ОК, мужик. У тебя всё было.
Ну не можешь ты в сложноподчиненные предложения - будь проще.
P.S. Кстати, и смысл сказанного разделяю.
как инопланетяне , "унесёнными ветром"
Смотря какая из двух
Справедливости ради эту технологию впервые применил Денис Ширяев, автор этих видео и на многих сайтах этот факт умалчивается. Самым первым был один из первых фильмов в истории — «Прибытие поезда» братьев Люмьер. Теперь его можно посмотреть в разрешении 4К и частотой 60 кадров в секунду.
Для улучшения видео автор использовал нейросети Dain и Gigapixel AI, которые позволили разбить оригинальный фильм на отдельные кадры и буквально дорисовать каждый из них. Полученные изображения были склеены в единый ролик. В дальнейшем автор планирует показать «Прибытие поезда» в цвете.
Для улучшения видео автор использовал нейросети Dain и Gigapixel AI, которые позволили разбить оригинальный фильм на отдельные кадры и буквально дорисовать каждый из них. Полученные изображения были склеены в единый ролик. В дальнейшем автор планирует показать «Прибытие поезда» в цвете.
А откуда взять эти детали? Они погибли безвозратно в момент съемки.
Ух ты, а на прибытии поезда на 😇0 смейство в масках идет?
У каждого купе своя дверь на улицу) Прикольно.
То есть, никакого "увеличения разрешения с программной обработкой" не произошло - простой апскейл с увеличением количества пикселей без увеличения разрешения как такового.
Gigapixel AI действительно весьма впечатляюще "дорисовывает" детализацию при увеличении. Тут проблема в том, что сам источник настолько мутный и недетализированный, что мощности даже такой отличной софтины хватило лишь на такой скромный результат (причём, с простым апскейлом было бы ещё хуже).
У каждого купе своя дверь на улицу
Это вуаль))
Спасибо, что своими словами довели до меня смысл сказанного мною выше.
Посмотрел работу Gigapixel AI - не впечатлен. Довольно качественный sharping, но вполне ожидаемо никаких чудес в плане дорисовки детализации.
Но на сегодняшний день это едва ли не лучший пакет для качественного увеличения разрешения (впрочем, у них вся AI-линейка продуктов весьма впечатляет). По крайней мере, ничего даже близко сопоставимого по качеству я раньше не встречал...
Железнодорожные вагоны получили развитие от карет. Несколько карет вряд на одной раме.
То есть, никакого "увеличения разрешения с программной обработкой" не произошло - простой апскейл с увеличением количества пикселей без увеличения разрешения как такового.
Есть подозрение, что часть деталей, восстановленных нейросетями, потом пропали при "устранении шумов и артефактов".
Интересно, какое там изначальное разрешение?
а потом нейросети дорисуют, как этот поезд едет дальше на следующую станцию, камера пройдет внутри вагона и покажет, как люди внутри сидят и разговаривают (с озвучкой, естественно), какой вид из окна. пр. И мы будем думать: надо же, откуда нейросети это все узнали из черно-белых зерен серебра 140 летней давности.
А откуда взять эти детали? Они погибли безвозратно в момент съемки.
Ух ты, а на прибытии поезда на ?0 смейство в масках идет?
В случае с итальянцами зря включили режим "face refinement". Из за этого лица неестественные.
По одежде чётко видно кто есть кто, обычный работяга или господин богатый.
Неужели и звук родной?
Неужели и звук родной?
ага. Зерна сербра записали при сьемки. Отклонения на несколько нанометров позволили восстановить волновую функцию. А мы и не знали, что так можно было.
Увеличение частоты кадров - там не просто дублирование -делается просчет промежуточных кадров.
Теги
Информация
Что ещё почитать
