perché la funzione di indicizzazione delle forme è così efficace sull'allineamento delle facce?

Question

Sto implementando qualche algoritmo di allineamento faccia di recente. Ho letto i seguenti documenti:

• Supervised descent method and its applications to face alignment
• Face alignment by explicit shape regression
• Face alignment at 3000 fps via regressing local binary features

Tutta la carta menzionato una parola chiave importante: shape-indexed-feature o pose-indexed-feature. Questa funzione svolge un ruolo chiave nel processo di allineamento del viso. Non ho capito il punto chiave di questa funzionalità. Perché è così importante?

Answer 1

Una funzione con indicizzazione delle forme è una funzionalità di cui l'indice fornisce alcuni indizi sulla struttura gerarchica della forma da cui proviene. Quindi, nell'allineamento facciale, i punti di riferimento facciali sono estremamente importanti, dal momento che sono le cose che saranno utili per allineare con successo i volti. Ma, prendendo in considerazione solo i punti di riferimento del viso, getta via parte della struttura inerente a una faccia. Sai che la pupilla è dentro l'iride, che è dentro l'occhio. Quindi, una funzione indicizzata dalla forma farebbe molto di più che dirti che stai guardando un punto di riferimento facciale - ti direbbe che stai guardando un punto di riferimento facciale all'interno di un'altra pietra miliare all'interno di un'altra pietra miliare. Perché ci sono solo alcune funzionalità che sono nidificate a 3 in questo modo, puoi essere più sicuro di allineare quelle correttamente.

Qui è una carta molto più vecchio che spiega alcune di queste con un linguaggio più semplice (soprattutto nell'introduzione): http://www.cs.ubc.ca/~lowe/papers/cvpr97.pdf