Discussion :

[Liamm]

Bonjour,

je n'arrive pas à conclure un traitement sur un fichier csv volumineux.
Pour simplifier, ce fichier se compose ainsi :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
date_aaaammjj_01; clé_01;etc_01;...;...;...;
date_aaaammjj_02; clé_01;etc_02;...;...;...;
date_aaaammjj_03; clé_01;etc_03;...;...;...;
date_aaaammjj_04; clé_01;etc_04;...;...;...;
date_aaaammjj_05; clé_01;etc_05;...;...;...;

Et cela avec de nombreuses autres clés.

Le fichier est trié sur :
-1- la clé (seconde colonne)
-2- la date première colonne)

La question est simple :
1/ Comment ne traiter (par exemple Lister) que la première ligne de chaque clé ?
et son alternative
2/ Comment ne traiter (par exemple Lister) que la dernière ligne de chaque clé ?

Bonne année 2023 à tous.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
2 0 2 3 
--------   =   17**2
2+0+2+3

[N_BaH]

Bonjour,

1/ sort -u ....,
2/ tac | sort -u....
?

[Flodelarab]

Bonjour

Je suis sûr que tu as déjà vu la technique ici, avec awk.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
$ awk -F';' '!vu[$2]++' fichier.csv
date_aaaammjj_01; clé_01;etc_01;...;...;...;

[Liamm]

Bonjour,

J'ai du mal à déchiffrer ce

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

$ awk -F';' '!vu[$2]++' fichier.csv

-F';' : signale que le séparateur de champs du fichier csv est le point-virgule.
! : représente (il me semble) un NOT.
$2 : représente (il me semble) la colonne où se trouvent les clés, c.à.d. la seconde colonne du fichier csv.

vu : je ne sais pas ; un vecteur ?
++ : je ne sais pas ; une incrémentation ?

Je suis dans le brouillard ; d'où deux autres questions :

Q1/ Où trouver une bonne doc à lire sur awk de préférence en français ?

Q2/ Peut-on faire sans awk ? (N_BaH propose la commande unique, mais les lignes sont différentes !)

[Flodelarab]

"vu" est un tableau associatif (c'est à dire un tableau qui a des indices texte au lieu d'indices nombre).
!vu[$2] signifie donc, littéralement, "tant qu'on l'a pas vu, on l'affiche". Et l'incrémentation change la valeur pour la clé. Donc elle n'est plus zéro, donc on l'a déjà vu. On n'affichera plus une ligne avec cette clé.


R1 : "gawk manual" est pas mal.

R2 : Si tu tries selon un champ avec sort, l'élément unique qu'il garde est le premier. N'est-ce pas ?

[N_BaH]

c'est ça.