Traitement par lot

Version imprimable

18/08/2021, 07h45
Archip

Traitement par lot

Bonjour à tous et à toutes,
je débute dans ce domaine et bien évidemment j'ai quelques difficultés.
Voici mon problème, j'aimerais utiliser le programme wav2vec sur 11974 fichiers, ils sont tous numérotés comme suit :
monfichier-00001.wav, monfichier-00002.wav, etc.
Voici la ligne de programme que je souhaite itérer :

Code:

wav2vec adresse1/fichier-00001.wav --format CSV > adresse2/fichier-00001.csv

Je souhaite aussi changer l'adressage (adresse1 à adresse2)

Si vous pouviez m’orienter j'en serrait ravi.
18/08/2021, 10h16
al1_24
Bonjour,

Une solution serait :
- une boucle for sur la liste des fichiers du modèle adresse1/*.wav
- dans la boucle on exécute la commande demandée en utilisant la variable de boucle en entrée et en en extrayant le nom de fichier (commande filename) pour le fichier de sortie

Bonjour :coucou:

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
$ for ((i=1;i<=11974;i++)); do nom="fichier-$(printf '%05i' $i)"; echo "wav2vec adresse1/$nom.wav --format CSV > adresse2/$nom.csv";done
wav2vec adresse1/fichier-00001.wav --format CSV > adresse2/fichier-00001.csv
wav2vec adresse1/fichier-00002.wav --format CSV > adresse2/fichier-00002.csv
wav2vec adresse1/fichier-00003.wav --format CSV > adresse2/fichier-00003.csv
wav2vec adresse1/fichier-00004.wav --format CSV > adresse2/fichier-00004.csv
wav2vec adresse1/fichier-00005.wav --format CSV > adresse2/fichier-00005.csv
wav2vec adresse1/fichier-00006.wav --format CSV > adresse2/fichier-00006.csv
wav2vec adresse1/fichier-00007.wav --format CSV > adresse2/fichier-00007.csv
wav2vec adresse1/fichier-00008.wav --format CSV > adresse2/fichier-00008.csv
wav2vec adresse1/fichier-00009.wav --format CSV > adresse2/fichier-00009.csv
wav2vec adresse1/fichier-00010.wav --format CSV > adresse2/fichier-00010.csv
wav2vec adresse1/fichier-00011.wav --format CSV > adresse2/fichier-00011.csv
wav2vec adresse1/fichier-00012.wav --format CSV > adresse2/fichier-00012.csv
wav2vec adresse1/fichier-00013.wav --format CSV > adresse2/fichier-00013.csv
wav2vec adresse1/fichier-00014.wav --format CSV > adresse2/fichier-00014.csv
wav2vec adresse1/fichier-00015.wav --format CSV > adresse2/fichier-00015.csv
wav2vec adresse1/fichier-00016.wav --format CSV > adresse2/fichier-00016.csv
wav2vec adresse1/fichier-00017.wav --format CSV > adresse2/fichier-00017.csv
wav2vec adresse1/fichier-00018.wav --format CSV > adresse2/fichier-00018.csv
wav2vec adresse1/fichier-00019.wav --format CSV > adresse2/fichier-00019.csv
wav2vec adresse1/fichier-00020.wav --format CSV > adresse2/fichier-00020.csv
(...)
wav2vec adresse1/fichier-11955.wav --format CSV > adresse2/fichier-11955.csv
wav2vec adresse1/fichier-11956.wav --format CSV > adresse2/fichier-11956.csv
wav2vec adresse1/fichier-11957.wav --format CSV > adresse2/fichier-11957.csv
wav2vec adresse1/fichier-11958.wav --format CSV > adresse2/fichier-11958.csv
wav2vec adresse1/fichier-11959.wav --format CSV > adresse2/fichier-11959.csv
wav2vec adresse1/fichier-11960.wav --format CSV > adresse2/fichier-11960.csv
wav2vec adresse1/fichier-11961.wav --format CSV > adresse2/fichier-11961.csv
wav2vec adresse1/fichier-11962.wav --format CSV > adresse2/fichier-11962.csv
wav2vec adresse1/fichier-11963.wav --format CSV > adresse2/fichier-11963.csv
wav2vec adresse1/fichier-11964.wav --format CSV > adresse2/fichier-11964.csv
wav2vec adresse1/fichier-11965.wav --format CSV > adresse2/fichier-11965.csv
wav2vec adresse1/fichier-11966.wav --format CSV > adresse2/fichier-11966.csv
wav2vec adresse1/fichier-11967.wav --format CSV > adresse2/fichier-11967.csv
wav2vec adresse1/fichier-11968.wav --format CSV > adresse2/fichier-11968.csv
wav2vec adresse1/fichier-11969.wav --format CSV > adresse2/fichier-11969.csv
wav2vec adresse1/fichier-11970.wav --format CSV > adresse2/fichier-11970.csv
wav2vec adresse1/fichier-11971.wav --format CSV > adresse2/fichier-11971.csv
wav2vec adresse1/fichier-11972.wav --format CSV > adresse2/fichier-11972.csv
wav2vec adresse1/fichier-11973.wav --format CSV > adresse2/fichier-11973.csv
wav2vec adresse1/fichier-11974.wav --format CSV > adresse2/fichier-11974.csv

18/08/2021, 15h29
N_BaH

je trouve que le nombre de fichiers n'est pas une donnée exploitable, car ce nombre est susceptible de changer ! :)
18/08/2021, 15h40
Flodelarab

Je trouve que l'extension n'est pas une donnée exploitable car d'autres wav du dossier ne doivent pas être la cible du script.
18/08/2021, 16h52
Archip

Merci beaucoup à vous tous,
à al1_24 tout d'abord car je demandais bien une orientation, la remarque de N_BaH me semble des plus judicieuses (tout autant que les liens de sa signature) et enfin à Flodelarab qui trouve une réponse immédiate.
j'ai encore tellement à apprendre que je suis certain de venir vous questionner à nouveau.
Merci encore.
18/08/2021, 19h30
N_BaH

Citation:

Envoyé par Flodelarab

[...] d'autres wav du dossier ne doivent pas être la cible du script.

ce n'est pas dit.

il n'est pas non plus dit que les nombres se suivent.

ET l'utilisation de find :)

Pourquoi ne pas utiliser "find"

Code:

find adresse1 -type f -name "fichier-*.wav" -exec ./mon_shell.sh {} \;

où mon_shell.sh va lancer "wav2vec" :mouarf: et prendre en compte le fichier en paramètre pour générer le "csv" dans adresse2 :?

cat mon_shell.sh

Code:

1
2
3
4
5
6
7
8
9
10
11
#!/bin/bash
F=$1
 
if [ -f "$F" ]
then
   F_Source=`basename $F`
   F_Target="./adresse2/${F_Source%%.*}.csv"
   echo "wav2vec ${F} --format CSV > $F_Target"
else
  echo "$F n'existe pas "
fi

Exemple de Resultat avec 11 fichiers wav dans adresse1 :)

Code:

1
2
3
4
5
6
7
8
9
10
wav2vec adresse1/fichier-1.wav --format CSV > ./adresse2/fichier-1.csv
wav2vec adresse1/fichier-10.wav --format CSV > ./adresse2/fichier-10.csv
wav2vec adresse1/fichier-11.wav --format CSV > ./adresse2/fichier-11.csv
wav2vec adresse1/fichier-3.wav --format CSV > ./adresse2/fichier-3.csv
wav2vec adresse1/fichier-4.wav --format CSV > ./adresse2/fichier-4.csv
wav2vec adresse1/fichier-5.wav --format CSV > ./adresse2/fichier-5.csv
wav2vec adresse1/fichier-6.wav --format CSV > ./adresse2/fichier-6.csv
wav2vec adresse1/fichier-7.wav --format CSV > ./adresse2/fichier-7.csv
wav2vec adresse1/fichier-8.wav --format CSV > ./adresse2/fichier-8.csv
wav2vec adresse1/fichier-9.wav --format CSV > ./adresse2/fichier-9.csv

quelques corrections commentées :

Code:

1
2
3
4
5
6
7
8
9
#!/bin/bash
 
fichier="$1"
 
# le test est inutile, parce que `find' remonte uniquement des fichiers qui existent.
#    F_Source=`basename $F`
    F_Source="${fichier##*/}" # voir la ligne en-dessous
    F_Target="./adresse2/${F_Source%%.*}.csv"
    echo "wav2vec \"$fichier\" --format CSV > \"$F_Target\"" # pour se souvenir qu'il faut des guillemets autour des variables

04/09/2021, 22h05
disedorgue

Et pourquoi utiliser un script shell avec find au lieu d'utiliser wav2vec avec find ?
04/09/2021, 22h42
N_BaH

pour le "renommage" ?!
pour la condition ? mais vu que je m'en suis débarrassée, ça pourrait tenir dans un -exec sh -c '...' \;'

Code:

find adresse1 -type f -regextype posix-extended -regex '^adresse1/fichier-[0-9]{5}\.wav$' -exec /bin/sh -c ' fn=$(basename -s .wav "{}"); wav2vec "$fn" --format CSV >"adresse2/$fn.csv"' ' \;
05/09/2021, 01h37
disedorgue

J'attendais plus une réponse de argoet, mais pourquoi pas...

Et en trichant un peu, on peut aussi se passer de basename (pas testé) :

Code:

find ...... -exec bash -c '[[ "{}" =~ '^.*/$.*$\.wav$' ]] && wav2vec "{}" --format CSV >"adresse2/${BASH_REMATCH[1]}.csv"' \;
06/09/2021, 09h06
argoet

Citation:

Envoyé par disedorgue

J'attendais plus une réponse de argoet, mais pourquoi pas...

Et en trichant un peu, on peut aussi se passer de basename (pas testé) :

Code:

find ...... -exec bash -c '[[ "{}" =~ '^.*/$.*$\.wav$' ]] && wav2vec "{}" --format CSV >"adresse2/${BASH_REMATCH[1]}.csv"' \;

Bonjour Disedorgue
En fait l'idée était que ce soit simple et clair :oops: (juste histoire de s'inspirer de ce que j'ai proposé )
et je ne suis pas forcement adepte des solutions "tous sur une même ligne" ou à la relecture le "capilotractage:aie:" est , trop souvent , de rigueur

Mais c'est toujours très enrichissant à vous lire , et je vous en remercie vivement
@Argoet