Duplikate aus Liste löschen

[niki0211]

Hi,

ich habe z.B. folgende Datei mit 2 Spalten:

test1 test1
test2 test3
test3 test1,test2,test3
test4 test40,test4
test5 test3,test4,test5

Ich würde gerne die Duplikate in der zweiten Spalte löschen. Ergbnis sollte also so aussehen:

test2 test3
test3 test1,test2
test4 test40
test5 test3,test4

Ich habe einiges mit awk probiert. Komme aber nicht auf das gewünscht Ergebnis.

Hat hier jemand vlt. einen Tipp für mich?

Danke und LG

 

[skylake]

Hi,

ich hab da mal was zusammen gehackt

~$ cat bla.txt
test1 test1
test2 test3
test3 test1,test2,test3
test4 test40,test4
test5 test3,test4,test5

AWK-Code siehe angehängte Datei (heißt statt myawk.awk myawk.txt)

Aufruf mit ./myawk.awk bla.txt

Viele Grüße