C, GTK: flusso video di immagini RGB a <60 fps

Question

Sto sviluppando un'applicazione che deve ricevere immagini da un dispositivo della fotocamera e visualizzarle in una finestra GTK.

La telecamera fornisce immagini prime RGB (3 byte per pixel, senza canale alfa, dimensione fissa) ad un frame rate variabile (1-50 fps).

ho già fatto tutta quella roba hardware e ora hanno una funzione di callback che viene chiamato con ogni nuova immagine acquisita dalla fotocamera.

Qual è il modo abbastanza easyest ma veloce per visualizzare quelle immagini nella mia finestra?

Ecco quello che ho già provato:

• utilizzando gdk_draw_rgb_image() su un'area di disegno gtk: fondamentalmente lavorato, ma reso così lenta che i processi di disegno sovrapposti e l'applicazione si è schiantato dopo i primi fotogrammi, anche con una frequenza di acquisizione di 1 fps.

• allocare una GdkPixbuf per ogni nuovo fotogramma e chiamando gtk_image_set_from_pixbuf() su un'immagine widget gtk: visualizza solo il primo fotogramma, poi vedo alcun cambiamento nella finestra. Può essere un bug nel mio codice, ma non so se sarà abbastanza veloce.

• utilizzando Cairo (cairo_set_source_surface(), quindi cairo_paint()): sembrava piuttosto veloce, ma l'immagine sembrava strisce, non so se il formato dell'immagine è compatibile.

Attualmente sto pensando di provare qualcosa come gstreamer e trattare le immagini come un flusso video, ma non sono sicuro se questo è come un peso inutile per il mio semplice meccanismo.

Grazie in anticipo per qualsiasi consiglio!

Answer 1

L'intera API GdkRGB sembra essere deprecato, in modo che probabilmente non è il metodo consigliato per risolvere questo problema.

Lo stesso vale per la chiamata a render a pixbuf. La documentazione in questione punta al Cairo, quindi la soluzione sembra essere quella di continuare a indagare sul motivo per cui la tua immagine sembrava errata quando resa dal Cairo.

Answer 2

rilassarsi è giusto, Il Cairo è la strada da percorrere se si vuole qualcosa che funziona in GTK2 e GTK3. Poiché i campioni sono RGB senza alfa, è necessario utilizzare il formato CAIRO_FORMAT_RGB24. Assicurati che la superficie che dipingi sia in quel formato. Inoltre, cerca di assicurarti di non allocare/distruggere costantemente il buffer di superficie se l'immagine di input mantiene le stesse dimensioni.