Rilevamento della linea su un'immagine di un foglio musicale in Android

Question

Sto lavorando ad Android Project per il riconoscimento ottico della musica. Faccio una foto di uno spartito con la fotocamera mobile e cerco di riconoscere le note e i simboli. Conosco molto bene la metodologia dopo la pre-elaborazione, ma in genere questo tipo di lavoro viene svolto con l'aiuto di uno scanner. (invece devo usare una telecamera mobile)

Intuitivamente, ho usato prima la trasformazione di hough per rilevare i righi (righe dello staff), quindi calcolare l'angolo tra loro e l'asse orizzontale e ruotare l'immagine tanto quanto l'angolo. Questo potrebbe funzionare teoricamente ma hough trova segmenti di linea e l'angolo di questi segmenti non è coerente. Quindi non ha funzionato. (Forse a causa dell'effetto della prospettiva)

Successivamente ho provato molti algoritmi di rilevamento dei bordi e di individuazione delle linee, ma nessuno di essi ha funzionato correttamente. (compresi i rivelatori del dominio di frequenza e del segmento di linea)

Ora sto pensando ad un nuovo approccio simile a quello degli scanner di documenti su Android. Provo a convertire la mia immagine in un modulo come un documento scansionato. Voglio allineare la mia immagine con l'asse orizzontale e sbarazzarmi dell'effetto a causa di inclinazione e prospettiva.

Mi chiedo se qualcuno ha qualche idea su come ottenere questa "scansione dei documenti". O se hai qualche idea sull'allineamento del documento o sul rilevamento di linee stabili, sarebbe più che utile per il mio lavoro futuro. Grazie.

Answer 1

Si potrebbe semplicemente misurare l'altezza del pentagramma superiore o inferiore a sinistra e a destra del foglio e calcolare l'angolo da quello. L'unica difficoltà può essere trovare un buon punto per misurare automaticamente l'altezza (cioè trovare quale colonna scansionare verticalmente per il pentagramma). Un modo per renderlo robusto sarebbe il controllo di 6 o comunque molti ci sono pixel neri consecutivi separati da zone bianche di larghezza quasi costante. Quando lo trovi, sei certo che non ci sono note vaganti o simboli che lanciano la misurazione.

Answer 2

Si dovrebbe prima eliminare le distorsioni della macchina fotografica:

http://en.wikipedia.org/wiki/Distortion_(optics)#Software_correction

Successivamente, a seguito in attuazione di openOMR, è possibile utilizzare il seguente pezzo di codice per eseguire FFT al fine di trovare l'angolo l'intera immagine è distorta a:

http://www.koders.com/java/fid38ED5C64ADB6C4F5F01FB05FB08744AF159A8244.aspx?s=FFT#L23