Mi stavo chiedendo: in una rete neurale feed-forward a più strati, se il livello di input include un neurone di polarizzazione, o questo è utile solo nei livelli nascosti? Se è così, perché?Un livello di input dovrebbe includere un neurone di polarizzazione?
Grazie,
Tunnuz
No, uno strato di input non ha bisogno di una connessione al neurone pregiudizi, dal momento che ogni attivazione ha ricevuto dal neurone pregiudizi sarebbe completamente ignorato dal l'ingresso effettivo.
Ad esempio, immaginate una rete che sta cercando di risolvere il classico XOR problem, utilizzando questa architettura (dove il neurone appena indicato con 1 è la polarizzazione):
Per eseguire questa rete sull'ingresso (1 , 0), è sufficiente bloccare l'attivazione dei neuroni X1 = 1 e X2 = 0. Ora, se anche X1 o X2 avessero ricevuto input dal bias, allora quell'input sarebbe stato comunque sovrascritto, rendendo così inutile tale connessione.
Scusami, nel tuo disegno il bias neuron fa parte del livello di input, poiché viene inoltrato al livello nascosto, ho sbagliato? – tunnuz
Eh, un po '. Il neurone di polarizzazione è generalmente sempre raffigurato come se fosse nel proprio strato di lil. Ho pensato che la tua domanda riguardasse se COLLEGARE l'unità di bias alle unità nel livello di input. In entrambi i casi la risposta è ferma; hai sempre solo bisogno di una singola unità di polarizzazione che abbia un'attivazione costante e sia nel suo stesso livello. Generalmente si connette a tutti i livelli non di input. – zergylord
Per ulteriori spiegazioni, vedere questa domanda: http://stackoverflow.com/q/7175099/821806. Inoltre, non è la mia figura, ma piuttosto quella che ho ottenuto da qui: http://home.agh.edu.pl/~vlsi/AI/xor_t/en/main.htm – zergylord