Проблема: пропущенные кадры в видео. Вот решения ,которые приходили мне в голову, но ни одно из них не является достаточно хорошим:

•  Пропустить его совсем
•  Заменить предыдущим/следующим
•  Заменить средним предыдущего и следующего
•  Заменить каким-то взвешенным средним окрестности
•  Сделать что-то ужасно умное, которое видит движущиеся объекты, и рисует их посредине между предыдущим и следующим кадром

Есть ещё идеи?

Обычно так и делают.

Обрати внимание на этот проект.
http://forum.ixbt.com/topic.cgi?id=62:12524


http://cgm.computergraphics.ru/content/view/111

Большое спасибо!

Так значит эта штука называется компенсация движения... Изучаю. Кое-что знала, но больше в связи со сжатием видео. 

Вопрос (если что, сильно не бить и тапками не кидаться): а почему не сделать, скажем, трёхмерный Фурье в релевантной окрестности? 

С какой целью делать фурье в релевантной окрестности? И почему не 4х мерный?

Для того, чтобы сделать интерполяцию отсутствующего кадра. Почему не четырёхмерный - догадайтесь сам ;)

Это сообщение отредактировал(а) MoebiusCat - 10.6.2011, 13:41

релевантной? Ты имеешь в виду в область интереса? 
Сделать можно, даже работать будет. 
Но ссылки я не зря дал. Если ты делаешь изменение частоты видео к примеру с 25 на 30 то тебе надо их аппроксимировать и найти точки которые будут на этой кривой уже с другой частотой. То есть в новом видео у тебя не будет ни одного исходного кадра. 
В таком случае БПФ не подходит. Так как работая в частотной области во временной мы получим искажения. 

В частотной области ты не сможешь отличить ВЧ сигнал(границы) от ВЧ шума(пропущенный кадр). В результате посл сглаживания у тебя хоть и получится интерполированный кадр, но все точечные особенности(края границы объектов) у тебя просто расползутся. 
А смотреть размытое видео не интересно. Поэтому выход один работать во временной области.

Но если у тебя не передискретизация, а просто по кокой-то причине один кадр из всего видео потерялся. То можно и через БПФ.




Это сообщение отредактировал(а) Pavia - 10.6.2011, 14:53

Наверное... Не знаю правильной терминологии... Ну, если отсутствует кадр n, то пользуемся информацией из кадров n-k, ..., n+k


Читаю...

Спасибо!

Вот! Нашла! Метод Optical Flow. Делаем интерполяцию с помощью вычисления трёхмерных производных! Как я не догадалась, я же думала об интерполяции!