MPEG2 - Stream - "Echtzeit" Verarbeitung

Hallo zusammen,

ein MPEG2 Stream und soll möglichst in Echtzeit (im Sinne von möglichst 
schnell und nicht mit einem definierten dt) verarbeitet werden. Es soll 
eine Software entstehen die eine Bilderkennung durchführt. Ich besitze 
Erfahrung in Bildverarbeitung anhand von MJPEG Streams.
Habe aber noch nie mit einem Format wie MPEG2 etwas zutun gehabt in dem 
keine Einzelbilder vorkommen.

Wie funktioniert allgemein die Bildverarbeitung bei einem solchen 
Format?
Habt ihr ein paar Tipps für mich, wie ich mich in diese Gebiet 
einarbeiten kann?

Programmiert wird in C/C++

Danke Gruß