24 декабря Архивач восстановлен после серьёзной аварии. К сожалению, значительная часть сохранённых изображений и видео была потеряна. Подробности случившегося. Мы призываем всех неравнодушных помочь нам с восстановлением утраченного контента!

Nvidia научила нейросеть замедлять видео

 Аноним 23/06/18 Суб 12:25:26 #1 №3117326     RRRAGE! 5 
5cpcmysgkytychfvprul2z41ue.jpeg
В нашей жизни может быть много моментов, которые нужно записать на камеру в замедленном режиме – первые шаги ребенка, первая поездка на море, трюк любимой собаки. Современный смартфон позволяет снимать с частотой 240 кадров в секунду или выше, но постоянно в таком режиме записывать не получится — памяти не хватит, и батарея сядет быстро. Созданная Nvidia нейросеть работает с уже отснятыми видео, превращая их в замедленные.

https://www.youtube.com/watch?v=MjViy6kyiqs

Исследователи из Nvidia создали систему на основе глубинного обучения для переработки видеороликов с частотой 30 кадров в секунду в замедленные видео. Они использовали библиотеку глубинного обучения PyTorch и графические процессоры Nvidia Tesla V100 GPUs. Систему тренировали с помощью 11 000 видеороликов повседневной и спортивной активности, снятых с частотой в 240 кадров в секунду. Благодаря этому она стала предсказывать промежуточные кадры. Чтобы проверить точность технологии, исследователи использовали отдельную базу данных с видео.

Технология позволяет делать видео гораздо более плавными и менее размытыми, чем в случае обычного замедления скорости. Частота кадров повышается до 480 в секунду. Для демонстрации результатов команда сравнила замедленные ролики, снятые видеоблогерами The Slo Mo Guys, с теми же видео, замедленными новым способом.

Первая нейронная сеть оценивает видеопоток — структуру движения, объектов, поверхностей и рёбер в сцене. Делает она это и вперёд по временной шкале, и в обратной последовательности для двух входных кадров. Затем система предсказывает, как пиксели будут перемещаться из одного кадра в следующий, создавая 2D-векторы этих перемещений.

Затем работает вторая нейросеть, которая предсказывает карту видимости – исключает те пиксели, которые должны быть перекрыты объектами, чтобы убрать артефакты. И система с помощью всех полученных данных искажает новые кадры между двумя выходными, чтобы обеспечить плавность перехода.


На видео можно сравнить результаты. Конечно, есть отличия между искусственно созданными замедленными видео и оригиналом, отснятым изначально с высокой частотой кадров. Это особенно заметно в сравнении с прыжком на надувной шар в бассейн от Slo Mo Guys на 54 секунде. Но если бы сравнивать было не с чем — отличить настоящее видео от «поддельного» было бы сложно.

Команда пока не знает, как коммерциализировать свою разработку. По их мнению, она ещё далеко до идеала и требует много ресурсов, в том числе временных. Вероятно, даже если такая технология и будет реализована в качестве продукта, она не будет запускаться на устройстве пользователя — вычисления произойдут в облаке.

https://habr.com/post/414953/
Аноним 23/06/18 Суб 12:29:10 #2 №3117356     RRRAGE! 0 
>>3117326 (OP)
А труханы у селёдки я так и не разглядел.
Аноним 23/06/18 Суб 12:33:37 #3 №3117394 
коньки размазались в говно
Аноним 23/06/18 Суб 12:34:45 #4 №3117407 
Лучшеб видяхи новые выпустили
Аноним 23/06/18 Суб 12:37:54 #5 №3117432 
>>3117326 (OP)
Было уже 2 дня назад.
Аноним 23/06/18 Суб 12:38:12 #6 №3117436 
14992143266481.jpg
>>3117407
Ага, а то на этих майнить уже хуйово.
Аноним 23/06/18 Суб 12:40:47 #7 №3117456     RRRAGE! 0 
Nelzya-prosto-tak-vzyat-iorig(1).jpg
>>3117356
нельзя просто так взять и разглядеть то чего нет
Аноним 23/06/18 Суб 12:42:07 #8 №3117468 
3546876732.png
>>3117326 (OP)
Какие нахуй нейросети? Модифицируй стандартный мпеговский кодек, который собственно и работает по принципу предсказания и получишь то же самое.
Аноним 23/06/18 Суб 12:44:40 #9 №3117490 
>>3117468
У мпега полиномиальное предсказание, а значит мыло вместо деталей.
Аноним 23/06/18 Суб 12:47:18 #10 №3117517 
LogoKodak(alt).svg.png
>>3117468
>>3117490
Лучче впихуй нейросеть в мпеговский кодак, и получить то же самоа
Аноним 23/06/18 Суб 12:47:23 #11 №3117518 
15286753567420.jpg
ПЕКАМРАЗИ, ГЛАЗ ЧЕЛОВЕКА НЕ ВИДИТ И НЕ РАЗЛИЧАЕТ БОЛЬШЕ, ЧЕМ 30 КАДРОВ В СЕКУНДУ.

КАКИЕ ЖЕ ПЕКАДАУНЫ ДЕГЕНЕРАТЫ, ПИЗДЕЦ ПРОСТО!
Аноним 23/06/18 Суб 12:51:31 #12 №3117558     RRRAGE! 1 
14505449345850.png
>>3117518
Аноним 23/06/18 Суб 12:52:04 #13 №3117563     RRRAGE! 1 
>>3117517
Спермомышление. Кому нужен будет мпег, когда его из-за нейросети раздует до 40 Гб?
Аноним 23/06/18 Суб 13:00:59 #14 №3117622 
>>3117326 (OP)
фигли толку от этой технологии когда она не может 23,9 кадра блюрея превратить в 60-75 кадров монитора РЕАЛТАЙМ?
Аноним 23/06/18 Суб 13:01:03 #15 №3117624 
>>3117326 (OP)
Заебись. Скоро в видимофайлах будут только опорные кадры, а всё остальное плеер дорисует.
4к рипы будут влазить в 300Мб, найс.
Аноним 23/06/18 Суб 13:03:24 #16 №3117642 
>>3117518
Только у европейцев. У аборигенов Австралии глаз различает более 60 кадров в секунду. Поэтому они не могут смотреть наши фильмы. Что нам кажется непрерывной картинкой, они воспринимают как набор отдельных кадров.
Аноним 23/06/18 Суб 13:11:42 #17 №3117705 
>>3117642
>Только у европейцев.
Нет, ты тоже различаешь. Раскрути велосипедное колесо и попробуй "словить" глазом движение спицы. Там и 60 кадров мало будет.
Аноним 23/06/18 Суб 13:15:32 #18 №3117728 
Да всем насрать на нвидию
Аноним 23/06/18 Суб 13:31:46 #19 №3117829     RRRAGE! 0 
>>3117326 (OP)
Замедлять видеокарты, чтобы быстрее покупали новые, тоже.
Аноним 23/06/18 Суб 13:35:48 #20 №3117856     RRRAGE! 0 
14818036245260.jpg
>>3117326 (OP)
>в Nvidia изобрели Deep Optical Flow
Аноним 23/06/18 Суб 13:40:08 #21 №3117893     RRRAGE! 0 
image.png
>>3117326 (OP)
Тем временем в великой Российской Федерации изобрели автомобиль, ездящий на навозе.
Аноним 23/06/18 Суб 13:55:01 #22 №3117982     RRRAGE! 0 
>>3117893
>автомобиль, ездящий на навозе
Но потенциально это важнее чем очередной говномашоб
Аноним 23/06/18 Суб 14:00:12 #23 №3118024 
>>3117326 (OP)
Ну и нахер мне надо ваше замедленное видео? Лучше бы изобрели дешевые и мощные видеокарты, пидоры((
Аноним 23/06/18 Суб 14:33:18 #24 №3118261 
>>3118024
Кому это выгодно, наивный гой? Либо плати дохуя денег за то, что есть, либо ничего не получишь. И так каждый год, ведь производительность запланированно падает, чтобы ты быстрее покупал. Олигополия АМД/Нвидиа-с.
Аноним 23/06/18 Суб 14:41:09 #25 №3118305 
>>3117326 (OP)
Приятно осознавать, что мои тысячи долларов потраченные на видяхи нвидии двигают прогресс.
Аноним 23/06/18 Суб 14:58:31 #26 №3118430 
>>3118024
Зачем тебе дешёвые и мощные видеокарты? Тебе надо дешёвую и сочную картинку.
Какая, тебе, плебею, разница, будет она рисоваться подсчётом полигонов через брутфорс тригонометрии, или через имитацию картинки реального мира на нейроночках?
Аноним 23/06/18 Суб 15:27:31 #27 №3118588 
>>3117326 (OP)
пусть замедлит цены теперь
Аноним 23/06/18 Суб 16:21:53 #28 №3118878     RRRAGE! 1 
>>3117893
биореатор - это же заебись! Вот настоящая наука, а не эта бесполезная хуйня для хипстоты.
Хочешь замедлить видео - снимай на высокоскоростную камеру. А это говно без задач. Мыльное.
Аноним 23/06/18 Суб 17:47:11 #29 №3119358 
>>3117624
В реальности тайм он сможет дорисовать если только у тебя ферма из 24 титанов
comments powered by Disqus

Отзывы и предложения