Come trovare linee duplicate su 2 file diversi? Unix

Question

Dal terminale unix, possiamo usare diff file1 file2 per trovare la differenza tra due file. Esiste un comando simile per mostrare la similarità su 2 file? (Molti tubi consentito, se necessario,

Ogni file contiene una riga con una frase d'archi; essi sono ordinati e duplicano linee rimosse con sort file1 | uniq

file1:.. http://pastebin.com/taRcegVn

file2: http://pastebin.com/2fXeMrHQ

E l'output dovrebbe produrre le righe che appaiono in entrambi i file

output: http://pastebin.com/FnjXFshs

sono in grado di utilizzare Python per farlo come tale ma penso che sia un po 'troppo da mettere nel terminale:

x = set([i.strip() for i in open('wn-rb.dic')]) 
y = set([i.strip() for i in open('wn-s.dic')]) 
z = x.intersection(y) 
outfile = open('reverse-diff.out') 
for i in z: 
    print>>outfile, i 

Answer 1

Come @tjameson dicono che può essere risolto in un altro thread. Proprio vorrebbe inviare un'altra soluzione: sort file1 file2 | awk 'dup[$0]++ == 1'

1. riferiscono a awk guide per ottenere alcuni awk nozioni di base, quando il valore del modello di una linea è vera questa linea verrà stampato

2. dup [ $ 0] è una tabella hash in cui ogni chiave è ogni riga dell'input, il valore originale è 0 e incrementi una volta che questa riga si verifica, quando si verifica nuovamente il valore dovrebbe essere 1, quindi dup[$0]++ == 1 è true. Quindi questa riga viene stampata.

Si noti che questo funziona solo quando non ci sono duplicati in entrambi i file, come è stato specificato nella domanda.

Answer 2

Se si desidera ottenere un elenco di linee ripetute senza ricorrere a AWK, è possibile utilizzare -d flag to uniq:

sort file1 file2 | uniq -d