Новое программное обеспечение Kandao использует методы искусственного интеллекта (ИИ) для прогнозирования движения, чтобы создать slow-mo до 1200 кадров в секунду в посте.
Разработанная в первую очередь для камер Obsidian и QooCam 360 / VR, эта технология берет кадры, снятые с более низкой частотой кадров, например, 30 или 60 кадров в секунду, и использует методы прогнозирования ИИ для интерполяции кадров для создания ультра-медленных движений.
Не все камеры производят или способны записывать с высокой частоту кадров, и эта функция востребована все больше и больше. Как часто говорят, «все выглядит лучше в замедленном виде». Хорошо, я допускаю, что медленное движение используется слишком часто, но для последовательностей с высоким действием, где вы хотите детализировать красоту или сложность движения, просто нет замены замедлению.
Демо Kandao’s — хорошее начало. Кто использовал предыдущие методы интерполяции замедленного движения, такие как Optical Flow, нет ничего идеального. Эти альтернативные методы часто создают искажения, артефакты вокруг объектов. Такие методы чаще всего путаются с мягкими краями и размытым изображением, и поэтому лучше всего снимать оригинальную последовательность и адаптировать ее к более медленному движению, например, убедившись, что у вас есть хорошие контрастные края и детали, а также использование быстрой скорости затвора, чтобы компьютер мог более точно прогнозировать движение.
Может показаться, что метод Kandao’s лучше, чем многие из существующих, хотя в некоторых областях проблемы деформации все еще существуют, и система также запутывается, когда один объект движется позади другого. Общая проблема с методами стиля Optical Flow. Тем не менее, это показывает, что такие методы улучшаются, и с помощью «обучения» ИИ такие системы будут только лучше распознавать и предсказывать движение объекта.
В прошлом году Nvidia представила свою собственную вычислительную систему замедленного движения на основе искусственного интеллекта. Беглый взгляд показал, что методы Nvidia немного лучше с меньшим количеством артефактов. Но следует принять во внимание то, что системе Nvidia требуются графические процессоры Tesla V100 и ускоренная система глубокого обучения PyTorch с ускорением cuDNN, и даже Nvidia признала, что, если ее система станет коммерческой, обработка, скорее всего, произойдет в облаке. Система Kandao’s , с другой стороны, является только программной.
Но главное, что демонстрирует Nvidia, это то, что такой вычислительный метод не просто хорош для создания медленного движения. Помните, что чем больше информации вы можете дать программе, тем лучше будет результат.
Поэтому, если вы подаете такое программное обеспечение, скажем, кадры со скоростью 120 кадров в секунду, вы можете продолжать создавать гораздо более медленные кадры движения, и любые артефакты будут минимизированы из-за того, что система имеет много временной информации, с помощью которой можно вычислить движение объектов. Это хорошо видно на демонстрации Nvidia, когда жидкость разбивается через теннисную ракетку. Все, что основано на жидкости, будет огромной проблемой для любой вычислительной системы замедленного движения, но система Nvidia справляется с этим невероятно хорошо.
Система Kandao, как мы уже говорили, разработана для собственного диапазона камер VR и 360, но мы можем ожидать появления гораздо большего количества этих видов техники. Получим ли мы когда-нибудь такие совершенные расчеты, что нам больше не понадобятся камеры с поддержкой медленного движения? Затраты на обработку для этих методов очень высоки, поэтому на данный момент, пожалуй, лучшая рекомендация — старайтесь сделать всё на съёмочной площадке. При этом камеры уже могут снимать с частотой 240 к/с и выше (кинокамеры blackmagic Ursa mini pro g2), на сколько данный эффект будет востребован именно в программном исполнении покажет время.
Также по теме:
НОВЫЙ РУБЕЖ ИСКУССТВЕННОГО ИНТЕЛЛЕКТА VFX
ИГРА ПРЕСТОЛОВ — КАК ДЕЛАЛИ ВИЗУАЛЬНЫЕ ЭФФЕКТЫ (VFX)
Наши товары:
Самый доступный телесуфлер для блогов TP-V3 можно купить тут
Нужны надежные подставки для фотостудии и кино — apple box купить тут
Тележки для ваших фильмов — можно заказать тут
В наших группа в fb и vk много интересного, что не вошло на сайт, подписывайтесь:
мы в вконтакте — https://vk.com/clubfidller_fly
мы в facebook — https://www.facebook.com/profshope/
наш instagram — https://www.instagram.com/fidller_com
telegram — https://t.me/fidller_com