В статье "Create your own real-time visual effects (http://www-128.ibm.com/developerworks/opensource/library/os-.../)" демонстрируются примеры использования библиотек SDL (http://www.libsdl.org/) и EffecTV (http://effectv.sourceforge.net/) для обработки ведеопотока в реальном режиме времени. Например, показано как выделять и отслеживать траекторию движущихся в кадре объектов.

URL: http://www-128.ibm.com/developerworks/opensource/library/os-.../
Новость: https://www.opennet.ru/opennews/art.shtml?num=6831

• Обработка видео в режиме реального времени под Linux,Аноним, 10:27 , 20-Янв-06
  • Обработка видео в режиме реального времени под Linux,Аноним, 11:54 , 20-Янв-06
• Обработка видео в режиме реального времени под Linux,Аноним, 23:01 , 22-Янв-06

Aside from a monitor, you need three pieces of hardware to use EffecTV:
...What is needed at a bare minimum to make sure your card works is a Brooktree/Conexant Bt8x8 series chipset in the video capture card.
Чипы от Philips отдыхают :(

печально это - обрабатывать видео на bt8x8 - это маразм, т.к. качество даже до vhs не дотянет :(

А я так понял там все что поддерживается v4l2 сойдет .... ?