Discussion :

[arnaudperfect]

Bonjour,

J'ai le fichier A :

user1:password:901:100:Prenom Nom:/home/user1:/bin/ksh
user2:password:902:100:Prenom Nom:/home/user2:/bin/ksh
user3:password:903:100:Prenom Nom:/home/user3:/bin/ksh
user4:password:904:100:Prenom Nom:/home/user4:/bin/ksh
user5:password:905:100:Prenom Nom:/home/user5:/bin/ksh

Puis un fichier B :

user6:password:901:100:Prenom Nom:/home/user6:/bin/ksh
user7:password:902:100:Prenom Nom:/home/user7:/bin/ksh
user3:password:903:100:Prenom Nom:/home/user3:/bin/ksh
user9:password:904:100:Prenom Nom:/home/user9:/bin/ksh
user5:password:905:100:Prenom Nom:/home/user5:/bin/ksh

J'aimerai à partir du fichier A, mettre à jours les informations du fichier B :

1. Si une ligne du fichier A n'existe pas dans le fichier B, je l'ajoute à la suite.
2. Si une ligne du fichier A est différente d'une ligne du fichier B, je mets à jour.

Sachant que la la clé unique entre les deux fichiers est la 1er colonne (userXX)

Comment faire cela en bash (avec une base de donnée cela aurai été trop facile :cry:)

Encore merci d'avance pour vos indications

[N_BaH]

bonjour,

c'est tout bête : "yaka" utiliser sort avec les bonnes options (unicité, clé) sur les deux fichiers en même temps, que tu mets dans une substitution de commande, pour en faire un echo redirigé vers le fichier B...
?

[frp31]

quand au passage d'une machine a l'autre c'est tres simple tu peux tuiliser "-" pour des accès directs

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

 echo toto | ssh -l operateur undertaker " cat - > t"

bien sur tu peux aussi tout simplement faire un scp
mais attention aux effets de bord au moment de l'ecriture du fichier

[arnaudperfect]

Merci pour vos réponses, mais... je n'est pas trop compris votre manière de faire

[Glavio]

Tu peux faire :
cat fichier1 fichier2 | sort -u | uniq

Mais parfois quelques doublons restent (je ne saurai pas dire pourquoi)

[arnaudperfect]

merci pour ta réponse. cela fonctionne bien.

Cependant,...


Dans chaque fichier, l'identifiant unique est la 1er colonne (users). Imaginons que l'on change certains paramètres à cette utilisateur. Si j'utilise ta méthode, mon utilisateur sera en double. Le but est de mettre à jour ces paramètres.

Avec awk, il y a pas moyen de faire cela ?

[Glavio]

La seule chose que je suis en mesure de proposer, c'est de rechercher dans les options de sort et uniq, afin de limiter la comparaison aux X premiers bit de chaque ligne et, ainsi, de limiter la comparaison à ton champ user...

[argoet]

En vous inspirant peut etre de ceci

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
#!/bin/ksh 
/bin/rm C
touch C
for i in `cat A B | cut -d":" -f1 | sort | uniq`
do
    Lig=`grep ^$i: A`
    echo "$i($Lig)"
    if [ "$Lig" != "" ] 
    then 
       echo $Lig >> C
    else
       grep ^$i: B >> C
    fi
done

[argoet]

A

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
user1:password:901:100:Prenom Nom:/home/user1:/bin/ksh
user2:password:902:100:Prenom Nom:/home/user2:/bin/ksh
user3:password:903:100:Prenom Nom:/home/repd3:/bin/ksh
user4:password:904:100:Prenom Nom:/home/user4:/bin/ksh
user5:password:905:100:Prenom Nom:/home/user5:/bin/ksh

B

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
user6:password:901:100:Prenom Nom:/home/user6:/bin/ksh
user7:password:902:100:Prenom Nom:/home/user7:/bin/ksh
user3:password:903:100:Prenom Nom:/home/user3:/bin/ksh
user9:password:904:100:Prenom Nom:/home/user9:/bin/ksh
user5:password:905:100:Prenom Nom:/home/user5:/bin/ksh

Donne C

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
user1:password:901:100:Prenom Nom:/home/user1:/bin/ksh
user2:password:902:100:Prenom Nom:/home/user2:/bin/ksh
user3:password:903:100:Prenom Nom:/home/repd3:/bin/ksh
user4:password:904:100:Prenom Nom:/home/user4:/bin/ksh
user5:password:905:100:Prenom Nom:/home/user5:/bin/ksh
user6:password:901:100:Prenom Nom:/home/user6:/bin/ksh
user7:password:902:100:Prenom Nom:/home/user7:/bin/ksh
user9:password:904:100:Prenom Nom:/home/user9:/bin/ksh

[argoet]

Plus simple

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
#!/bin/ksh 
/bin/rm C
touch C
for i in `cat A B | cut -d":" -f1 | sort | uniq`
do
    # A est prioritaire sur B
    grep -h ^$i: A B | head -1 >> C
done

[argoet]

Si B est prioritaire sur A

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
#!/bin/ksh 
/bin/rm C
touch C
for i in `cat A B | cut -d":" -f1 | sort | uniq`
do
    # B est prioritaire sur A
    grep -h ^$i: B A | head -1 >> C
done

donne C

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
user1:password:901:100:Prenom Nom:/home/user1:/bin/ksh
user2:password:902:100:Prenom Nom:/home/user2:/bin/ksh
user3:password:903:100:Prenom Nom:/home/user3:/bin/ksh
user4:password:904:100:Prenom Nom:/home/user4:/bin/ksh
user5:password:905:100:Prenom Nom:/home/user5:/bin/ksh 
user6:password:901:100:Prenom Nom:/home/user6:/bin/ksh
user7:password:902:100:Prenom Nom:/home/user7:/bin/ksh
user9:password:904:100:Prenom Nom:/home/user9:/bin/ksh

[arnaudperfect]

Merci d'avance, je vais essayer vos propositions.

[N_BaH]

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

echo "$(sort -t':' -u -k1,1 fic{A,B})" > ficB

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

grep -vf ficB ficA >> ficB

fonctionne aussi, mais cela prend en compte des lignes entières, contrairement à la première solution, qui, elle, ne considère, effectivement que le premier champ.

[matafan]

On ne peux pas écrire dans un fichier qu'on est en train de lire. Ca marchera peut-être pour des petits fichiers qui tiennent intégralement dans le buffer, mais il y a toujours une taille à partir de laquelle on se retrouvera avec un fichier vide ou corrompu.

Bref il faut soit utiliser un fichier temporaire, soit ruser avec un truc du genre :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
exec <ficB
rm ficB
{ cat ficA; cat; } | sort -t':' -u -k1,1 > ficB

[N_BaH]

peut-être pour le grep, mais ça devrait fonctionner correctement avec la substitution de commande, puisqu'elle est évaluée avant d'être affichée par echo pour être redirigée :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
resultat=$(sort -t':' -u -k1,1 fic{A,B})
echo "$resultat" > ficB

c'est pareil, sauf qu'ici, on utilise une variable intermédiaire superflue.

par contre, ta ruse ne fonctionne pas :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
$ exec 3<ficB
$ cat ficB
user6:password:901:100:Prenom Nom:/home/user6:/bin/ksh
user7:password:902:100:Prenom Nom:/home/user7:/bin/ksh
user3:password:903:100:Prenom Nom:/home/user3:/bin/ksh
user9:password:904:100:Prenom Nom:/home/user9:/bin/ksh
user5:password:905:100:Prenom Nom:/home/user5:/bin/ksh
$ echo blah > ficB
$ cat <&3
blah

[jouana]

Informe toi sur la commande sed

[matafan]

N_BaH d'accord pour le echo.

La "ruse" sert à écrire dans le fichier qu'on lit sans passer par un fichier temporaire. Je ne comprend pas ce que tu essayais de faire avec ton test. Plus simplement ça consiste à faire :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
exec <fichier
rm fichier
Commande_qui_lit_le_contenu_de_fichier_sur_stdin > fichier

Ce qui fonctionne, parce que le > recréé un fichier qui a le même nom que le fichier original, mais qui est en fait un différent fichier (inode différent). Et la lecture du contenu de fichier est toujours possible parce qu'on avait un fd en lecture sur ce fichier au moment du rm.

[N_BaH]

ah, d'accord ! il ne s'agit pas de dupliquer le descripteur de fichier, mais d'utiliser ce qui s'affiche sur la sortie standard :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
#!/bin/bash
 
exec <ficB
cat ficA - | sort -t':' -u -k1,1 > ficB

NB: tapé sur la ligne de commande, ça ne marchait pas, et provoquait un exit
sur la ligne de commande :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
(exec <ficB; cat ficA - | sort -t':' -u -k1,1 > ficB)
cat ficB
user1:password:901:100:Prenom Nom:/home/user1:/bin/ksh
user2:password:902:100:Prenom Nom:/home/user2:/bin/ksh
user3:password:903:100:Prenom Nom:/home/user3:/bin/ksh
user4:password:904:100:Prenom Nom:/home/user4:/bin/ksh
user5:password:905:100:Prenom Nom:/home/user5:/bin/ksh
user6:password:901:100:Prenom Nom:/home/user6:/bin/ksh
user7:password:902:100:Prenom Nom:/home/user7:/bin/ksh
user9:password:904:100:Prenom Nom:/home/user9:/bin/ksh

ne me déconnecte plus