Duplikate aus Liste löschen

Diskutiere Duplikate aus Liste löschen im Shell-Skripte Forum im Bereich Programmieren unter Linux/Unix; Hi, ich habe z.B. folgende Datei mit 2 Spalten: test1 test1 test2 test3 test3 test1,test2,test3 test4 test40,test4 test5...

  1. #1 niki0211, 21.11.2019
    niki0211

    niki0211 Grünschnabel

    Dabei seit:
    21.11.2019
    Beiträge:
    1
    Zustimmungen:
    0
    Hi,

    ich habe z.B. folgende Datei mit 2 Spalten:

    test1 test1
    test2 test3
    test3 test1,test2,test3
    test4 test40,test4
    test5 test3,test4,test5

    Ich würde gerne die Duplikate in der zweiten Spalte löschen. Ergbnis sollte also so aussehen:

    test2 test3
    test3 test1,test2
    test4 test40
    test5 test3,test4

    Ich habe einiges mit awk probiert. Komme aber nicht auf das gewünscht Ergebnis.

    Hat hier jemand vlt. einen Tipp für mich?

    Danke und LG
     
  2. Anzeige

    Anzeige

    Wenn du mehr über Linux erfahren möchtest, dann solltest du dir mal folgende Shellkommandos anschauen.


    Registrieren bzw. einloggen, um diese und auch andere Anzeigen zu deaktivieren
  3. #2 skylake, 22.11.2019
    skylake

    skylake Grünschnabel

    Dabei seit:
    22.11.2019
    Beiträge:
    1
    Zustimmungen:
    0
    Hi,

    ich hab da mal was zusammen gehackt :D

    ~$ cat bla.txt
    test1 test1
    test2 test3
    test3 test1,test2,test3
    test4 test40,test4
    test5 test3,test4,test5

    AWK-Code siehe angehängte Datei (heißt statt myawk.awk myawk.txt)

    Aufruf mit ./myawk.awk bla.txt

    Viele Grüße :)
     

    Anhänge:

    • myawk.txt
      Dateigröße:
      311 Bytes
      Aufrufe:
      3
Thema:

Duplikate aus Liste löschen

Die Seite wird geladen...

Duplikate aus Liste löschen - Ähnliche Themen

  1. CUPS Integration - Duplikate automatisieren

    CUPS Integration - Duplikate automatisieren: Hallo Gemeinde, es handelt sich um CUPS, habe keinen passenderen Platz gefunden, die SParte "Drucker" war mir zu allgemein. Ist es möglich...
  2. Email Duplikate in IMAP (Cyrus)

    Email Duplikate in IMAP (Cyrus): Hallo zusammen, folgendes Szenario: ich habe einen Cyrus IMAP Server auf dem es genau eine Mailbox gibt (nämlich meine). In dieser Mailbox gibt...
  3. HPE übernimmt KI-Spezialisten MapR

    HPE übernimmt KI-Spezialisten MapR: Hewlett-Packard Enterprise (HPE) übernimmt den in Schieflage geratenen Hadoop-Spezialisten MapR. Weiterlesen...
  4. SSB-basierte Alternative zu Mailinglisten für Kernel-Entwicklung vorgeschlagen

    SSB-basierte Alternative zu Mailinglisten für Kernel-Entwicklung vorgeschlagen: Der Linux-Kernel ist eines der wenigen Projekte, die die ganze Entwicklung noch per E-Mail abwickeln. Manchen erscheint dieses Vorgehen archaisch....
  5. Hundertserver sucht Dich: Linux Spezialisten in Berlin.

    Hundertserver sucht Dich: Linux Spezialisten in Berlin.: Hundertserver sucht einen Linuxspezialiten in Berlin Hundertserver über sich: "Hundertserver bietet Unternehmen die Möglichkeit, digitale...
  1. Diese Seite verwendet Cookies um Inhalte zu personalisieren. Außerdem werden auch Cookies von Diensten Dritter gesetzt. Mit dem weiteren Aufenthalt akzeptierst du diesen Einsatz von Cookies.
    Information ausblenden