Tenho um arquivo texto que � resultado de uma consluta a um banco de
dados. Por�m, este arquivo tem v�rios dados duplicados porqu� os
registros estavam corrompidos, e preciso remover estes dados para
refazer a database. A estrutura do arquivo � a seguinte:
dado1
dado1
dado2
dado2
dado3
dado4
dado5
dado5
Como fazer para "limpar" este arquivo, eliminando as linhas repetidas???
Tentei com o sed, mas n�o vi na manpage dele uma sintaxe que fizesse
isso. O arquivo em quest�o tem umas 10000 linhas ...
--
"Esta mensagem, incluindo seus anexos, n�o cont�m nenhuma
informa��o confidencial, pois se � para ser confidencial
n�o poderia ser transitada por e-mail em uma lista p�blica.
Portanto, se voc� n�o � o destinat�rio final da mensagem, n�o
se preocupe! Al�m disso voc� pode fazer qualquer coisa com
esta mensagem, inclu�ndo esta s�tira � notas de copyrights
ridiculas, que eu n�o estou nem a�!!!"