Numeroiden seulontaohjelma linuxissa?

[vilhelmtell]

Minulla olisi tarve saada ohjelma joka käy läpi antamani numeroluettelon (esim. puhelinnumeroita) ja seuloo kaikki samanlaiset numerot pois niin, että kahta samanlaista numeroa ei esiinny. Satutteko tietämään löytyykö mistään ubuntun valmiista ohjelmista tällainen funktio tai sitten jostain toisesta ladattavasta ohjelmasta? Kiitos paljon etukäteen vastauksista!

[SuperOscar]

sort ja uniq putkessa? Esim.

Koodia: [Valitse]

$ cat puhnrot.txt | sort | uniq

[odysseus]

Miksi putkittaa kun ei tarvitse?

$ sort -u puhnrot.txt

[janne]

jossain tapauksessa myös (linux journalissa esitetty) ratkaisu voi olla ihan näppärä:

Koodia: [Valitse]

$ nl puhnrot.txt | sort -k2 -u | sort -n | cut -f2-
mutta toki tuo simppelimmät ajavat valtaosassa tapauksia asiansa.