Discussion :

[kondor76]

Bonjour,

je souhaite compresser à la volée de la manière suivante:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find . -exec zgrep $pattern {} \; > log_20130619.txt | xargs gzip

Mon fichier log_20130619.txt se crée bien mais n'est pas compressé au fil de l'eau.

Une idée sur l'origine du problème?

Merci

kondor76

[Invité]

Est-ce le fichier de log ou les fichiers retournés par le find que tu souhaites compresser?

[kondor76]

Est-ce le fichier de log ou les fichiers retournés par le find que tu souhaites compresser?

le fichier de log.txt, le find affichant les lignes contenues dans d'autres fichiers...

[disedorgue]

Bonjour,

Par défaut gzip compresse l'entrée standart sur la sortie standard, donc un simple:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find . -exec zgrep $pattern {} \; | gzip >log_20130619.txt.gz

devrait le faire.

[Invité]

D'après ce que j'ai vu de xarg, il était à utiliser pour compresser les fichier que la commande find trouve. Ta commande me paraissait donc bizarre.

[jack-ft]

D'après ce que j'ai vu de xarg, il était à utiliser pour compresser les fichier que la commande find trouve.

Hou là! ça manque de clarté, voire de cohérence!

1) Un coup, tu dis que le find retourne les lignes des fichiers (dans le log).
2) Un autre coup, tu souhaites que find retourne le nom des fichiers pour les comprimer.

Il me semble que Disedorgue répondait à l'assertion n°1.

Pour l'assertion n°2, il me semble (pas testé) qu'il suffit de passer l'option '-l' à grep:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find . -exec zgrep -l "$pattern" {} \; | xargs gzip

[Sve@r]

D'après ce que j'ai vu de xarg, il était à utiliser pour compresser les fichier que la commande find trouve. Ta commande me paraissait donc bizarre.

Salut
Si tu veux compresser les fichiers trouvés par find

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find . -exec gzip -9 {} \;

Si tu veux compresser le résultat affiché par find

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find . -print | gzip -c9 >result.gz

xargs (utilisé pour traiter une liste d'arguments) ne sert à rien vu que find sait déjà traiter cette liste dans le {}...

[Invité]

Pour l'assertion n°2, il me semble (pas testé) qu'il suffit de passer l'option '-l' à grep:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find . -exec zgrep -l "$pattern" {} \; | xargs gzip

C'est ça qu'il me semble avoir vu en regardant ce que faisait xarg (que je ne connaissais pas)

Je pense que kondor mélangeait la méthode pour l'assertion n°1 et celle pour l'assertion n°2

xargs (utilisé pour traiter une liste d'arguments) ne sert à rien vu que find sait déjà traiter cette liste dans le {}...

Exact, même je fais plutôt du ls -l avec le find ^^

xarg ne sert donc à rien avec la commande find?
Est-il utile avec d'autres commandes?

[disedorgue]

Un cas d'exemple d'utilisation de xargs (qui pour le problème lui-même était plus pour le fun) mais que l'on pourrait rencontrer dans un cas pratique...:
http://www.developpez.net/forums/d13...e/#post7355350

En gros xargs, est pratique pour toutes les commandes qui ne savent par exemple que traiter des arguments et non une entrée de type file descriptor comme echo par exemple.
Ce que j'essaye de faire comprendre, c'est que xargs sert à gérer des arguments et non une entrée de type file descriptor (le pipe le fait très bien).

[Sve@r]

xarg ne sert donc à rien avec la commande find?

Non puisque find possède un outil permettant de représenter les fichiers trouvés (les accolades) pour les faire passer à une commande externe (via exec)

A noter que la commande externe est exécutée à chaque fichier et non en une fois globale (on le voit si on fait un truc de ce genre: find . -name "*.py" -exec vi {} \; => le "vi" est lancé à chaque fichier

Est-il utile avec d'autres commandes?

Oui quand les commandes ne peuvent pas traiter plus de X fichiers d'un coup et que tu veux en traiter Y (Y > X) style grep toto */* et que tu obtiens un message "grep arg list too long".
Dans ce cas, il faut envoyer la liste à xargs qui se chargera de la découper en blocs et faire traiter ces blocs par ton grep (ou autre)

[Invité]

Merci pour ces info.

[jlliagre]

A noter que la commande externe est exécutée à chaque fichier et non en une fois globale (on le voit si on fait un truc de ce genre: find . -name "*.py" -exec vi {} \; => le "vi" est lancé à chaque fichier

C'est vrai avec cette syntaxe mais si l'on remplace le délimiteur de fin de commande "\;" par un "+", la commande sera exécutée avec autant de paramètres que l'OS en supporte:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find . -name "*.py" -exec vi {} +

Dans ce cas, il faut envoyer la liste à xargs qui se chargera de la découper en blocs et faire traiter ces blocs par ton grep (ou autre)

Cela présente des risques avec des noms de fichiers non standard. Si l'on souhaite une syntaxe portable, il est recommandé d'utiliser "find -exec ...+" qui fait tout aussi bien ce découpage en blocs et ainsi éviter xargs.

Avec Gnu find et Gnu xargs, il faut utiliser les options "find ... -print0" et "xargs -0" pour éviter ces écueils.

[Sve@r]

C'est vrai avec cette syntaxe mais si l'on remplace le délimiteur de fin de commande "\;" par un "+", la commande sera exécutée avec autant de paramètres que l'OS n'en supporte:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find . -name "*.py" -exec vi {} +

Ah ça je ne connaissais pas