Recherche dynamique sur les lignes d'un fichier

**nanooby** · 05/09/2014, 11h11

Bonjour à tous,

Petit nouveau sur le forum Batch, il faut un début à tout

Je vous sollicite car je suis confronté à un problème avec la commande findstr, je vais vous expliquer.

Avant tout, ce que je cherche à faire, c'est à partir d'une ligne stockée dans une variable, je recherche la présence du mot VALID ou FAILED ou NO_MODEL.
Si un de ces mots est présent, actuellement je fais juste un echo de la ligne. Par la suite, je voudrais récupérer le premier champs de la ligne, et faire d'autres opérations pour lesquels je reviendrai vers vous si je ne m'en sort pas. Mais chaque chose en son temps, en restant sur mon simple echo, j'ai déjà un problème. Ma boucle itère une seule fois. Voici mon code, j'explique ensuite :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
FOR /f "delims=" %%a in ('type %Mon_repertoire%\CAMPAGNE_DE_TEST\RAPPORT.txt') do (
	REM echo %%a>> %Mon_repertoire%\CAMPAGNE_DE_TEST\TMP_RAPPORT.txt
	findstr "VALID" %%a && GOTO Found
	findstr "FAILED" %%a && GOTO Found
	findstr "NO_MODEL" %%a && GOTO Found
	GOTO End
	
	:Found
	FOR /f "tokens=1 delims=:" %%b in ("%%a") do (
		echo %%b
	)
	
	:End
	echo.
)

Et voici un petit exemple du Fichier à traiter :

################################################################
################################################################
### Rapport de la campagne de tests sur PUBPARC
###
### La campagne de tests a ete lancee par kguegan
###
### 29/08/2014 12h05m40s G06R01C04
################################################################
################################################################

#####################################
### Resultats des tests PubParc : ###
#####################################

CMD_ACQ_Fibre_0001001023_0384674312_D38 : VALID

Pas de description pour ce test

--------------------

CMD_TRF_Fibre_0001001023_0384674312_D38 : VALID

Pas de description pour ce test

--------------------

CMD_ACQ_Fibre_0001001023_0384674312_D38 : VALID

Pas de description pour ce test

--------------------

CMD_TRF_Fibre_0001001023_0384674312_D38 : VALID

Pas de description pour ce test

--------------------

QS_NR_CAS12 : FAILED

Pas de description pour ce test

Donc mon premier FOR me renvoi la première ligne, que le findstr ne peut traiter. Il affiche le message trois fois, puis fin du programme.
Il itère donc une seule fois...

Any idea ?

Pour info, quand je mets en commentaires le findstr, il itère correctement.

**sachadee** · 05/09/2014, 12h31

Salut,

Tu ne peux pas faire un findstr sur une variable

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

    findstr "VALID" %%a && GOTO Found

dans ton cas %%a ce refère à une ligne du fichier rapport.txt. Hors FINDSTR attend un nom de fichier.
Tu pourrais faire un PIPE findstr sur un echo de la ligne

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

echo %%a | findstr "VALID" && GOTO Found

Mais ça serait beaucoup trop long.

Dans ton cas tu peux simplifier la récuperation de ton 1er champ de cette manière :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
@echo off&cls
::Le fichier à tester
Set "$Fichier=rapport.txt"

::Les valeurs à tester
Set "$Cherche=VALID FAILED NO-MODEL"

::La recherche
for %%x in (%$Cherche%) do (
  for /f "tokens=1 delims= " %%a in ('findstr "%%x" %$Fichier%') do (echo Trouv‚ [%%x] - Valeur : [%%a]
))

Sortie :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
Trouvé [VALID] - Valeur : [CMD_ACQ_Fibre_0001001023_0384674312_D38]
Trouvé [VALID] - Valeur : [CMD_TRF_Fibre_0001001023_0384674312_D38]
Trouvé [VALID] - Valeur : [CMD_ACQ_Fibre_0001001023_0384674312_D38]
Trouvé [VALID] - Valeur : [CMD_TRF_Fibre_0001001023_0384674312_D38]
Trouvé [FAILED] - Valeur : [QS_NR_CAS12 ]

**nanooby** · 05/09/2014, 14h22

Trop fort

Je m'attaque à la suite, je reviens si j'ai encore un soucis !!

**nanooby** · 05/09/2014, 15h05

Ah ouai mais là ça pose problème...

Si tu remarque dans mon code, même si c'est en commentaires, je retranscrit ce que je lis dans un fichier temporaire.
En fait, ce que je souhaite faire, c'est ajouter sous le nom des tests qui précèdent les mentions VALID FAILED ou NO-MODEL si mon test est VALID ou non dans un autre environnement.

Donc soit il m'est possible aisément d'insérer sous la ligne concernée, soit il faut repartir sur une lecture ligne par ligne pour que je puisse insérer dans un fichier temporaire...

EDIT : peut être partir sur le echo pipe dans ce cas ? Le temps n'est pas un soucis, le process est déjà très long en dehors de ça...

EDIT 2 : le echo n'est pas très concluant

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
	echo %%a | findstr "VALID" && echo titi
	echo %%a | findstr "FAILED" && echo tata
	echo %%a | findstr "NO_MODEL" && echo toto

Résultat : rien

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
	echo %%a | findstr "VALID" && echo titi
	echo %%a | findstr "FAILED" || echo tata
	echo %%a | findstr "NO_MODEL" && echo toto

Résultat :
tata
%%a

Le findstr m'emm*rde

**sachadee** · 05/09/2014, 17h39

Donne un exemple de ce que tu veux en sortie pour que ça soit un peu plus clair.

**nanooby** · 05/09/2014, 17h41

Je suis en retard, je t'envoie ça Lundi, en attendant j'ai fait un affichage à la suite du fichier.

Merci à toi

**nanooby** · 08/09/2014, 09h33

Bonjour !

Donc pour donner un exemple, voici ce que j'ai en entrée :

File Rapport :

################################################################
################################################################
### Rapport de la campagne de tests sur PUBPARC
###
### La campagne de tests a ete lancee par kguegan
###
### 29/08/2014 12h05m40s G06R01C04
################################################################
################################################################

#####################################
### Resultats des tests PubParc : ###
#####################################

CMD_ACQ_Fibre_0001001023_0384674312_D38 : VALID

Pas de description pour ce test

--------------------

CMD_TRF_Fibre_0001001023_0384674312_D38 : VALID

Pas de description pour ce test

--------------------

CMD_ACQ_Fibre_0001001023_0384674312_D381 : VALID

Pas de description pour ce test

--------------------

CMD_TRF_Fibre_0001001023_0384674312_D381 : VALID

Pas de description pour ce test

--------------------

Et

File FFH :

CMD_ACQ_Fibre_0001001023_0384674312_D381:KO

File FREG :

CMD_ACQ_Fibre_0001001023_0384674312_D381:KO
CMD_TRF_Fibre_0001001023_0384674312_D381:KO

Je souhaite donc en sortie

################################################################
################################################################
### Rapport de la campagne de tests sur PUBPARC
###
### La campagne de tests a ete lancee par kguegan
###
### 29/08/2014 12h05m40s G06R01C04
################################################################
################################################################

#####################################
### Resultats des tests PubParc : ###
#####################################

CMD_ACQ_Fibre_0001001023_0384674312_D38 : VALID
FFH : VALID
FREG : VALID

Pas de description pour ce test

--------------------

CMD_TRF_Fibre_0001001023_0384674312_D38 : VALID
FFH : VALID
FREG : VALID

Pas de description pour ce test

--------------------

CMD_ACQ_Fibre_0001001023_0384674312_D381 : VALID
FFH : FAILED
FREG : FAILED

Pas de description pour ce test

--------------------

CMD_TRF_Fibre_0001001023_0384674312_D381 : VALID
FFH : VALID
FREG : FAILED

Pas de description pour ce test

--------------------

Pour l'instant, j'ai complété le rapport avec une partie FFH en reprenant le nom de chaque test, et idem pour FREG.
C'est une solution viable mais de secours car à la base j'étais parti pour compléter en insérant en dessous du nom du test.

Donc s'il y a une solution simple, je suis pour, sinon tant pis.

**sachadee** · 12/09/2014, 13h07

En gros on récupère la valeurs dans File Rapport et on test cette valeur dans File FFH et File REG et on génère un nouveau rapport avec le status compilé de chaque valeur.

**nanooby** · 16/09/2014, 09h24

Bonjour,

J'ai un énorme soucis d'optimisation :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
::Verification sur FREGATE
echo Verification des resultats sur FREGATE ...
IF EXIST %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt DEL %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt 2>nul
for /f "delims=" %%a in ('type %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Y0EM1.FLUX.RQUETEUR.FREG.FOEXTRAC.txt') do ( 
	set "flag="
	for /f "delims=" %%b in ('type %Mon_repertoire%\Modeles\MODELE_FREG.txt') do ( 
		if "%%a"=="%%b"  (
			set flag=1
		)
    )
	if not defined flag (
		echo ########################## >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		echo %%a >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		echo ########################## >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		FOR /f "tokens=1 delims=|" %%E in ("%%a") do (
			echo %%E:KO>> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\TMP_FREG.txt
		)
	)
	echo b
)

Je peux pas rajouter de GOTO, ça break ma boucle principale :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
::Verification sur FREGATE
echo Verification des resultats sur FREGATE ...
IF EXIST %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt DEL %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt 2>nul
for /f "delims=" %%a in ('type %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Y0EM1.FLUX.RQUETEUR.FREG.FOEXTRAC.txt') do ( 
	set "flag="
	for /f "delims=" %%b in ('type %Mon_repertoire%\Modeles\MODELE_FREG.txt') do ( 
		if "%%a"=="%%b"  (
			set flag=1
			GOTO break1
		)
    )
:break1
	if not defined flag (
		echo ########################## >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		echo %%a >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		echo ########################## >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		FOR /f "tokens=1 delims=|" %%E in ("%%a") do (
			echo %%E:KO>> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\TMP_FREG.txt
		)
	)
	echo b
)

Comment faire ?

**sachadee** · 16/09/2014, 12h21

Salut,

fait un call :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
:Verification sur FREGATE
echo Verification des resultats sur FREGATE ...
IF EXIST %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt DEL %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt 2>nul
for /f "delims=" %%a in ('type %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Y0EM1.FLUX.RQUETEUR.FREG.FOEXTRAC.txt') do ( 
	set "flag="
	for /f "delims=" %%b in ('type %Mon_repertoire%\Modeles\MODELE_FREG.txt') do ( 
		if "%%a"=="%%b"  (
			set flag=1
                )
        )
	Call:break1
)

exit/b

:break1
	if not defined flag (
		echo ########################## >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		echo %%a >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		echo ########################## >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		FOR /f "tokens=1 delims=|" %%E in ("%%a") do (
			echo %%E:KO>> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\TMP_FREG.txt
		)
	)
	echo b
)

N'aurait-tu pas meilleur temps d'utiliser FIND plustôt que de boucler sur chaque ligne ?

**nanooby** · 16/09/2014, 14h30

Le findstr je l'avais mis totalement de côté dans ma tête tellement il m'en a fait baver

Tu pense que le findstr serait encore mieux ?

EDIT : J'ai des erreurs chaine à chercher trop longue avec findstr

**sachadee** · 16/09/2014, 14h47

EDIT : J'ai des erreurs chaine à chercher trop longue avec findstr

Les limites du BAT.

Peux-tu utiliser une commande externe ? Où tout doit-être en BAT pur ?

**nanooby** · 16/09/2014, 14h52

Envoyé par sachadee

Les limites du BAT.

Peux-tu utiliser une commande externe ? Où tout doit-être en BAT pur ?

Jusque là tout est en BAT concernant la partie Windows. L'utilisateur doit lancer un script et tout se fait tout seul. Je sais pas si intégré un outil externe serait une bonne idée

Et le call fait-il vraiment gagner du temps ? Ma logique me ferait penser au contraire que c'est l'inverse

Le top ça serait de pouvoir sortir du for secondaire en restant dans le principal...

Et je trouve pas

**sachadee** · 16/09/2014, 14h57

Et le call fait-il vraiment gagner du temps ? Ma logique me ferait penser au contraire que c'est l'inverse

Si tu veux faire ton code de cette manière la question ne se pose pas.

Maintenant tu dois avoir des lignes vraiment très longues pour que findstr te donne cette erreur.

**nanooby** · 16/09/2014, 15h00

Envoyé par sachadee

Si tu veux faire ton code de cette manière la question ne se pose pas.

Maintenant tu dois avoir des lignes vraiment très longues pour que findstr te donne cette erreur.

Oui, c'est des lignes avec des données de tables, et y en a beaucoup, elles sont assez longue.

J'ai un fichier de 2000 lignes et un autre de 6000, ça a pris plusieurs heures hier soir

Il faut vraiment que je réduise au plus possible

Sachant que chacun de ces deux fichiers est comparé à leur jumeau si tout se passe bien... C'est pour ça, là dans mon algo c'est du n² ça craint !!

EDIT : une des lignes :

QS_NR_CAS01|141586943|TUADPOST|301251243|141586943|2007-10-08|9999-12-31|0003|N|0000000000| |0000|M Nolf Leonel | |0000000000|0000| | |2007-10-09-20.07.42.528138|

Mais il manque des tas de NUL dans la ligne là, elle est vachement longue, 218 caractères en fait

**sachadee** · 16/09/2014, 15h47

218 caractères ça devrait pas poser de poblèmes avec findstr.

Exemple :

test.txt :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
QS_NR_CAS01|141586943|TUADPOST|301251243|141586943|2007-10-08|9999-12-31|0003|N|0000000000| |0000|M Nolf Leonel | |0000000000|0000| | |2007-10-09-20.07.42.528138|
Salut les filles

tati.txt :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
QS_NR_CAS01|141586943|TUADPOST|301251243|141586943|2007-10-08|9999-12-31|0003|N|0000000000| |0000|M Nolf Leonel | |0000000000|0000| | |2007-10-09-20.07.42.528138|
QS_NR_CAS01|141586943|TUADPOST|301251243|141586943|2007-10-08|9999-12-31|0003|N|0000000000| |0000|M Nolf Leonel | |0000000000|0000| | |2007-10-09-20.07.42.528139|
QS_NR_CAS01|141586943|TUADPOST|301251243|141586943|2007-10-08|9999-12-31|0003|N|0000000000| |0000|M Nolf Leonel | |0000000000|0000| | |2007-10-09-20.07.42.528130|
QS_NR_CAS01|141586943|TUADPOST|301251243|141586943|2007-10-08|9999-12-31|0003|N|0000000000| |0000|M Nolf Leonel | |0000000000|0000| | |2007-10-09-20.07.42.528134|
QS_NR_CAS01|141586943|TUADPOST|301251243|141586943|2007-10-08|9999-12-31|0003|N|0000000000| |0000|M Nolf Leonel | |0000000000|0000| | |2007-10-09-20.07.42.528135|

Test.bat :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
@echo off

for /f "delims=" %%a in (test.txt) do findstr "%%a" tati.txt >nul && call:trouve "%%a" || call:pasTrouve "%%a"
exit/b

:trouve
echo trouv‚ %1
exit/b

:Pastrouve
echo pas trouv‚ %1

Sortie :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
trouvé "QS_NR_CAS01|141586943|TUADPOST|301251243|141586943|2007-10-08|9999-12-31|0003|N|0000000000| |0000|M Nolf Leonel | |0000000000|0000| ||2007-10-09-20.07.42.528138|"
pas trouvé "salut les gars"

Tu peux également utiliser un script mixte BAT/Powershell. Mais dans ton cas la première solution est meilleur et surtout plus rapide:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
@echo off
set $Find="Texte a chercher"
set $Fichier="toto.log"

for /f  "delims=" %%x in  ('echo Select-String -Path %$Fichier%  -pattern %$Find% ^| powershell -c -') do (
  set $test=%%x
  if defined $test echo trouv‚)

**nanooby** · 16/09/2014, 16h15

C'est un peu plus rapide, mais c'est pas si énorme.

Si j'installe diffutils pour Windows, ça sera surement plus rapide. Mais même si j'ai bien sû m'en servir en shell, je pense que je galère trop pour m'y attaquer en batch

**sachadee** · 16/09/2014, 16h23

Si j'installe diffutils pour Windows, ça sera surement plus rapide. Mais même si j'ai bien sû m'en servir en shell, je pense que je galère trop pour m'y attaquer en batch

Si tu cherches juste à pointer les difference entre 2 fichiers, en BAT tu peux utiliser FC.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

FC /?

**nanooby** · 16/09/2014, 16h29

Envoyé par sachadee

Si tu cherches juste à pointer les difference entre 2 fichiers, en BAT tu peux utiliser FC.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

FC /?

Non en fait pas possible, pck la ligne peut exister mais ne pas être à la même place... Et certaine peuvent être dans le modèle mais pas dans le fichier auquel on le compare...
Je dois chercher la ligne dans le fichier coute que coute. Par contre si je pouvais arrêter de chercher quand je l'ai trouvée, ça serait bien.

Au fait après test ta solution était plus rapide mais jamais elle trouvait de différences alors qu'il y en avait -_- je cherche pourquoi

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
echo Verification des resultats sur FREGATE ...
IF EXIST %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt DEL %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt 2>nul
for /f "delims=" %%a in ('type %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Y0EM1.FLUX.RQUETEUR.FREG.FOEXTRAC.txt') do ( 
	set "flag="
	set "$Find=%%a"
	set "$Modele=%Mon_repertoire%\Modeles\MODELE_FREG.txt"
	for /f  "delims=" %%x in  ('echo Select-String -Path %$Modele%  -pattern %$Find% ^| powershell -c -') do (
		set $test=%%x
		if defined $test (
			set flag=1
		)
    )
	if not defined flag (
		echo ########################## >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		echo %%a >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		echo ########################## >> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\Diff_FREG.txt
		FOR /f "tokens=1 delims=|" %%E in ("%%a") do (
			echo %%E:KO>> %Mon_repertoire%\CAMPAGNE_DE_TEST_bis\TMP_FREG.txt
		)
	)
)

La variable modele je vais la sortir, ça évitera qu'elle soit redéfinie à chaque fois vu qu'elle ne change pas