Ako hľadať duplicity? (sort, uniq)

Ako hľadať duplicity v súboroch?






Znalosti: 


- Základy linuxu

- ovládať základy počítača

- poznať politiku súborov

- kto by to mal vedieť?: šikovný a zvedavý začiatočník to zvládne


miro@stasak:~$ cat /etc/*release
DISTRIB_ID=Ubuntu
DISTRIB_RELEASE=14.04
DISTRIB_CODENAME=trusty
DISTRIB_DESCRIPTION="Ubuntu 14.04.5 LTS"

skúsime cez pipe použiť príkaz uniq a vidíme koľko duplicít nám našlo:



miro@stasak:~$ sort skuska.txt  | uniq -c
      1
      1 111
      1 112
      3 123
      2 234
      1 245
      1 251
      1 345

miro@stasak:~$ sort skuska2.txt | uniq -c
      9
      2 Joe Sakic
      7 Jozef Golonka
      1 paul kariya
      1 sakic
      2 wayne gretzky