compter les doublons dans une séquence triée à l'aide d'outils en ligne de commande

Question

J'ai une commande (cmd1) qui parcourt un fichier journal pour filtrer un ensemble de chiffres. Les nombres sont dans un ordre aléatoire, j'utilise donc sort -gr pour obtenir une liste de nombres triés à l'envers. Il peut y avoir des doublons dans cette liste triée. J'ai besoin de trouver le nombre de chaque numéro unique dans cette liste.

Par exemple, si la sortie de cmd1 est :

100 
100 
100 
99 
99 
26 
25 
24 
24

J'ai besoin d'une autre commande vers laquelle je peux diriger la sortie ci-dessus, afin d'obtenir.. :

100     3
99      2
26      1
25      1
24      2

Answer 1

Comment ;

$ echo "100 100 100 99 99 26 25 24 24" \
    | tr " " "\n" \
    | sort \
    | uniq -c \
    | sort -k2nr \
    | awk '{printf("%s\t%s\n",$2,$1)}END{print}'

Le résultat est :

100 3
99  2
26  1
25  1
24  2

Answer 2

uniq -c fonctionne pour GNU uniq 8.23 au moins, et fait exactement ce que vous voulez (en supposant une entrée triée).

Answer 3

Si l'ordre n'est pas important

# echo "100 100 100 99 99 26 25 24 24" | awk '{for(i=1;i<=NF;i++)a[$i]++}END{for(o in a) printf "%s %s ",o,a[o]}'
26 1 100 3 99 2 24 2 25 1

Answer 4

Triez numériquement les chiffres à l'envers, puis comptez les doublons, puis intervertissez les mots de gauche et de droite. Alignez-les en colonnes.

printf '%d\n' 100 99 26 25 100 24 100 24 99 \
   | sort -nr | uniq -c | awk '{printf "%-8s%s\n", $2, $1}'

100     3
99      2
26      1
25      1
24      2

Answer 5

En Bash, nous pouvons utiliser un tableau associatif pour compter les instances de chaque valeur d'entrée. En supposant que nous ayons la commande $cmd1 par exemple

#!/bin/bash

cmd1='printf %d\n 100 99 26 25 100 24 100 24 99'

Ensuite, nous pouvons compter les valeurs dans la variable tableau a en utilisant le ++ opérateur mathématique sur les entrées du tableau concerné :

while read i
do
    ((++a["$i"]))
done < <($cmd1)

Nous pouvons imprimer les valeurs résultantes :

for i in "${!a[@]}"
do
    echo "$i ${a[$i]}"
done

---

Si l'ordre de sortie est important, nous pourrions avoir besoin d'un outil externe. sort des clés :

for i in $(printf '%s\n' "${!a[@]}" | sort -nr)
do
    echo "$i ${a[$i]}"
done