Come ottenere gli angoli utilizzando GPUImageHarrisCornerDetectionFilter

Question

Sto cercando di ottenere i punti d'angolo da un'immagine fissa utilizzando GPUImageHarrisCornerDetectionFilter.

ho guardato il codice di esempio dal progetto, ho guardato la documentazione, e ho guardato questo post che è circa la stessa cosa: GPUImage Harris Corner Detection on an existing UIImage gives a black screen output

ma non riesco a farlo funzionare - e ho difficoltà a capire come questo dovrebbe funzionare con le immagini fisse.

Quello che ho a questo punto è questo:

func harrisCorners() -> [CGPoint] { 
    var points = [CGPoint]() 

    let stillImageSource: GPUImagePicture = GPUImagePicture(image: self.image) 
    let filter = GPUImageHarrisCornerDetectionFilter() 

    filter.cornersDetectedBlock = { (cornerArray:UnsafeMutablePointer<GLfloat>, cornersDetected:UInt, frameTime:CMTime) in 
     for index in 0..<Int(cornersDetected) { 
      points.append(CGPoint(x:CGFloat(cornerArray[index * 2]), y:CGFloat(cornerArray[(index * 2) + 1]))) 
     } 
    } 

    filter.forceProcessingAtSize(self.image.size) 
    stillImageSource.addTarget(filter) 
    stillImageSource.processImage() 

    return points 
} 

Questa funzione restituisce sempre [] quindi ovviamente non funziona.

Un dettaglio interessante: ho compilato il progetto FilterShowcaseSwift dagli esempi GPUImage e il filtro non riesce a trovare angoli molto chiari, come su un foglio di carta su uno sfondo nero.

Answer 1

filter.cornersDetectedBlock = { (cornerArray:UnsafeMutablePointer<GLfloat>, cornersDetected:UInt, frameTime:CMTime) in 
    for index in 0..<Int(cornersDetected) { 
     points.append(CGPoint(x:CGFloat(cornerArray[index * 2]), y:CGFloat(cornerArray[(index * 2) + 1]))) 
    } 
} 

Questo codice qui impostato imposta un blocco che viene chiamato ogni fotogramma.

Questo è un processo asincrono in modo che quando la funzione restituisce che non è mai stato chiamato ancora e il tuo array deve essere sempre vuoto. Dovrebbe essere chiamato dopo che il frame ha terminato l'elaborazione.

Per verificare ciò, impostare un punto di interruzione all'interno di quel blocco e verificare se viene chiamato.

avvertimento da Brad Larson (creatore di GPUImage) nei commenti:

Il GPUImage si crea qui stillImageSource saranno deallocata dopo questa funzione uscite e potrebbe causare crash in questo caso.