Wie erstelle ich ein Array eindeutiger Elemente aus einem String / Array in Bash?

Wenn ich eine Zeichenfolge "1 2 3 2 1" oder ein Array [1,2,3,2,1] habe, wie kann ich die eindeutigen Werte auswählen, d. H.

"1 2 3 2 1" produces "1 2 3" 

oder

[1,2,3,2,1] produces [1,2,3]

Ähnlich wie uniq, aber uniq scheint auf ganzen Linien zu funktionieren, nicht auf Mustern innerhalb einer Linie ...

Mit GNU awk(dies behält auch die ursprüngliche Reihenfolge bei)

printf '%s\n' "1 2 3 2 1" | awk -v RS='[[:space:]]+' '!a[$0]++{printf "%s%s", $0, RT}'
1 2 3 

In readein bashArray

read -ra arr<<<$(printf '%s\n' "1 2 3 2 1" |
 awk -v RS='[[:space:]]+' '!a[$0]++{printf "%s%s", $0, RT}')
printf "%s\n"  "${arr[@]}"
1
2
3

Wenn Sie zsh verwenden:

$ array=(1 2 3 2 1)
$ echo ${(u)array[@]}
1 2 3

oder (wenn die KSH_ARRAYSOption nicht eingestellt ist) sogar

$ echo ${(u)array}
1 2 3

Für ein Array mit beliebigen Werten ist es ziemlich schwierig, bashda es keinen eingebauten Operator dafür hat.

bash Das Speichern von NUL-Zeichen in seinen Variablen wird jedoch nicht unterstützt. Sie können dies also verwenden, um dies an andere Befehle zu übergeben:

Das Äquivalent von zsh's:

new_array=("${(@u}array}")

auf einem neueren GNU-System könnte sein:

eval "new_array=($(
  printf "%s\0" "${array[@]}" |
    LC_ALL=C sort -zu |
    xargs -r0 bash -c 'printf "%q\n" "$@"' sh
  ))"

Alternativ können Sie in neueren Versionen von bashund unter der Annahme, dass keines der Array-Elemente leer ist, assoziative Arrays verwenden:

unset hash
typeset -A hash
for i in "${array[@]}"; do
  hash[$i]=
done
new_array=("${!hash[@]}")

Mit Bash 4.4 und neuer und mit GNU sort:

readarray -td '' new_array < <(
  printf '%s\0' "${array[@]}" | LC_ALL=C sort -zu)

Die Reihenfolge der Elemente wäre in diesen verschiedenen Lösungen nicht gleich.

Mit tcsh:

set -f new_array = ($array:q)

Würde behalten die f irst Element ( a b a=> a b) , wie zsh‚s (u)Expansion Flagge.

set -l new_array = ($array:q)

Würde das letzte ( a b a=> b a) behalten . Diese entfernen jedoch leere Elemente aus dem Array.

Diese Lösung hat bei mir funktioniert.

ids=(1 2 3 2 1)
echo "${ids[@]}" | tr ' ' '\n' | sort -u | tr '\n' ' '

Das Obige erzeugt 1 2 3 als Ausgabe.

Kürzere Version, wie von Costas vorgeschlagen, könnte sein,

printf "%s\n" "${ids[@]}" | sort -u | tr '\n' ' '

Um die Endergebnisse in einem Array zu speichern, können Sie Folgendes tun:

IFS=$' '
arr=($(printf "%s\n" "${ids[@]}" | sort -u | tr '\n' ' '))
unset IFS

Wenn ich jetzt ein Echo mache arr, ist dies die Ausgabe, die ich bekomme.

echo "${arr[@]}"
1 2 3

Verweise

https://stackoverflow.com/a/13648438/1742825 https://stackoverflow.com/a/9449633/1742825

Um es vollständig in der Shell zu tun und das Ergebnis in ein Array zu setzen,

declare -A seen
for word in one two three two one
do
        if [ ! "${seen[$word]}" ]
        then
                result+=("$word")
                seen[$word]=1
        fi
done
echo "${result[@]}"

In Worten: Wenn wir ein bestimmtes Wort noch nicht gesehen haben, fügen Sie es dem resultArray hinzu und markieren Sie es als gesehen. Sobald ein Wort gesehen wurde, ignorieren Sie nachfolgende Erscheinungen.