decouper un string

Version imprimable

29/04/2010, 15h19
ldiaz

decouper un string
Salut a tous
faites pas attention au titre (jajajaja)

Alors voila, je voudrais modifier une ligne avec des champs en la decoupant, voici un exemple:

J'ai ca:

Code:

000000009 653 L $$aURANIUM; URANIUM ORES; SPAIN; ENVIRONMENT; HYDROMETALLURGY

Et je voudrais obtenir ca:
Code:

1 2 3 4 5 000000009 653 L $$aURANIUM 000000009 653 L $$aURANIUM ORES 000000009 653 L $$aSPAIN 000000009 653 L $$aENVIRONMENT 000000009 653 L $$aHYDROMETALLURGY
Est ce possible en bash?
Le fichier possede plus de 30 000 lignes
et chaque enregistrement aura une quantité diferente d'info separée par des ";"
UN enregistrement est une succesion de lignes qui commencent par un numero...la borne superieur pour les distinguer est:

Code:

000000002 LDR L -----nam--2200337Ia-45e0

et la derniere:

Code:

000000009 FMT L BK

Aussi si je dois appliquer le meme boulot a une autre ligne avec un autre numero...au lieu de 653 ca pourrait etre 510 par exemple.
Pourrais-je avoir l'option de mettre ca dans la commande...comme ceci:

sh decoupage.sh fichiersource.txt 653 510

D'avance merci de votre aide
29/04/2010, 17h02
Feanorin

Regarde du côté du read line pour parcourir ton fichier

Ensuite tu peux faire un sed -e "s/string1/string2/g" de ta ligne pour remplacer les ; par ta nouvelle chaine
29/04/2010, 17h05
ldiaz

Salut
et si je remplace les ; par autre chose....ca marche si je met \n pour aller a la ligne?
Je suis plus que newbee en bash..
Merci
29/04/2010, 17h18
Feanorin

Oui ça créer un retour à la ligne , par contre je ne connais pas trop la commande awk mais si ton fichier est formaté , cela peux être intéressant

http://www.funix.org/fr/unix/awk.htm

Pour savoir si une chaine est présente dans ta ligne tu peux passer par la commande grep

echo "$line" | grep -qF string_a_chercher il te renverra une chaîne nulle s'il n'a pas trouvé d'occurrence

pour chaque itération entre 000000002 LDR L -----nam-- et 000000009 FMT L BK
je ferai une boucle du genre
Code:

1 2 3 4 5 6 7 8 9 10 ciff=$(cat t | cut -d"a" -f1) #gestion d'entete for i in $(cat t) ; do echo $i ; done | sed "s/;//g;1,4d;s/.*/$chifa&/g" 000000009 653 L$$aURANIUM 000000009 653 L$$aORES 000000009 653 L$$aSPAIN 000000009 653 L$$aENVIRONMENT 000000009 653 L$$aHYDROMETALLURGY #gestion de bas d'iteration
après pour faire plus précis il faudrait un exemple réel d'au moins 2 blocks de données.

30/04/2010, 12h23
ldiaz

et voici le fichier:

000000510 LDR L -----nam--2200385Ia-45e0
000000510 00810 L 0211s9999 xx 000 0 und d
000000510 020 L $$a84-500-3320-9
000000510 022 L $$a0081-3397
000000510 041 L $$aINGLES
000000510 042 L $$a1
000000510 088 L $$aJ.E.N. 454
000000510 090 L $$aINFORMES JEN
000000510 245 L $$aSTATUS RODS
000000510 250 L $$a1 ED
000000510 260 L $$aMADRID $$b JUNTA DE ENERGIA NUCLEAR$$c1979
000000510 300 L $$a77 P. 11 FIGS.
000000510 340 L $$aPAPEL
000000510 440 L $$aINFORMES TECNICOS J.E.N.
000000510 500 L $$aFIGURA EN PORTADA EL CENTRO DE TRABAJO DE CADA AUTOR
000000510 505 L $$aINFORME SOBRE EL SIMINARIO CELEBRADO
000000510 590 L $$aINFORME
000000510 650 L $$a220300
000000510 653 L $$aBARRAS DE COMBUSTIBLE;IRRADIACION;REACTOR FR-2;REACTORES DE NEUTRONES RAPIDOS
000000510 653 L $$aFUEL RODS;IRRADIATION;FR-2 REACTOR;FAST REACTORS
000000510 700 L $$aBOJAR, K.
000000510 700 L $$aELB, H.
000000510 700 L $$aKUMM, K.
000000510 700 L $$aLOPNEZ, J.
000000510 700 L $$aOTEGANDARA, J.L.
000000510 700 L $$aOTENDARA, J.L.$$cCIEMAT
000000510 710 L $$aJUNNUCLEAR;JEN
000000510 852 L $$aCEN Y BIBLIOTECA CENTRAL
000000510 856 L $$ahttentales/biblioteca_central/343_IJ0454.pdf'
000000510 901 L $$aJUNUCLEAR (J.E.N.)
000000510 902 L $$a23/06/89
000000510 FMT L BK
000000511 LDR L -----nam--2200313Ia-45e0
000000511 00810 L 0211s9999 xx 000 0 und d
000000511 022 L $$a0081-3397
000000511 041 L $$aINGLES
000000511 042 L $$a1
000000511 088 L $$aJ.E.N. 379
000000511 090 L $$aINFORMES JEN
000000511 245 L $$aINEPERIODIC SOLUTIONS, NON-PERIODIC ATTRACTORS, AND RELATED CONVECTIVE AND OTHERWISE NON-LINEAR PHENOMENA
000000511 250 L $$a1 ED
000000511 260 L $$aMADRID $$b JUNTA DE ENERGIA NUCLEAR$$c1977
000000511 300 L $$a144 P. 9 FIGS. 105 REFS.
000000511 340 L $$aPAPEL
000000511 440 L $$aINFORMES TECNICOS J.E.N.
000000511 505 L $$aEN EEPENDEINTES DEL TIEMPO (TALES COMO LAS OSCILACIONES DE RELAJACION)Y ASIMISMO SE LA TRANSICION A LA TURBULENCIA. TAMBIEN SE ESTUDIAN LAS SOLUCIONES ESTACIONARIAS, CICLOS LIMITES Y ESTRUCTURAS ESPECIALES INHOMOGENEAS(ORDENEDAS:ESTRUCTURAS DISIPATIVAS)EN SISTEMAS SENCILLOS DE REACCION-DIFUSION.POR ULTIMO, SE CONSTRUYE EL ATRACTOR NO PERIODICO(O ANOMALO) QUE APARECE PARA ALTOS NUMEROS DE RAYLEIGH EN EL MODELO DE LORENZ DE ECUACIONES DE BOUSSINESQ-OBERBECK TRUNCADAS Y SE DISCUTEN ASIMIMO EL FENOMENO DE LA TURBULENCIA.
000000511 590 L $$aINFORME
000000511 650 L $$a660000
000000511 653 L $$aCONVECTIVE INSTABILITIES;LYAPUNOV METHOD;CHEMICAL REACTION KINETICS;LANDAU FLUCTUATIONS ;HYDRODYNAMICS;NONLINEAR PROBLEMS
000000511 653 L $$aINESTABILIDADES CONVECTIVAS; CINETICA DE LAS REACCIONES QUIMICAS; HIDRODINAMICA; PROBLEMAS NO LINEALES
000000511 700 L $$aGARCARDE, M.
000000511 700 L $$aGARCDE, M.$$cCIEMAT
000000511 710 L $$aJUNTA DE ENERGIA NUCLEAR;JEN
000000511 852 L $$aCENTENTACION Y BIBLIOTECA CENTRAL
000000511 856 L $$ahttps/biblioteca_central/413_IJ0379.pdf'
000000511 901 L $$aJUNTA DE ENERGIA NUCLEAR (J.E.N.)
000000511 902 L $$a12/07/89
000000511 FMT L BK
000000512 LDR L -----nam--2200337Ia-45e0
000000512 00810 L 0211s9999 xx 000 0 und d
000000512 022 L $$a0081-3397
000000512 041 L $$aESPAÑOL
000000512 042 L $$a1
000000512 088 L $$aJ.E.N. 376
000000512 090 L $$aINFORMES JEN
000000512 245 L $$aRECINTO PARA LA MANIPULACION DE MATERIALES DE ELEVADA ACTIVIDAD
000000512 250 L $$a1 ED
000000512 260 L $$aMADRID $$b JUNTA DE ENERGIA NUCLEAR$$c1977
000000512 300 L $$a17 P. 5 FIG.
000000512 340 L $$aPAPEL
000000512 440 L $$aINFORMES TECNICOS J.E.N.
000000512 505 L $$aUNO AJE Y PUESTA A PUNTO, DE RECINTOS ADECUADOS PARA EL PROCESAMIENTO SIN RIESGO DE LOS PRODUCTOS ACTIVOS. DENTRO DE ESTA LINEA SE HA ESTUDIADO Y CONSTRUIDO UN NUEVO RECINTO PARA LA MANIPULACION DE CANTIDADES ELEVADAS DE ACTIVIDAD, BLINDADO CON UNA PARED DE PLOMO DE 150MM DE ESPESOR. EN ESTA PUBLICACION SE DETALLAN NUMEROSOS ASPECOS QUE PUEDEN INTERESAR A LAS PERSONAS QUE TRABAJAN EN ESTE CAMPO.
000000512 590 L $$aINFORME
000000512 650 L $$a52000
000000512 653 L $$aHOT CELLS;MATERIALS HANDLING;RADIOACTIVE MATERIALS;SHIELDING;LEAD;THICKNESS;RADIATION PROTECTION
000000512 653 L $$aMATERIALES RADIACTIVOS; PLOMO; CELDAS CALIENTES; BLINDAJES; PROTECCION CONTRA LAS RADIACIONES
000000512 700 L $$aCASTDE LA
000000512 700 L $$aDOMIIGUEZ, G.
000000512 700 L $$aJIMEOSSO, F.
000000512 700 L $$aJIMEO, F.$$cCIEMAT
000000512 710 L $$aJUNTA DE ENERGIA NUCLEAR;JEN
000000512 852 L $$aCENTRO DE DOCUMENTACION Y BIBLIOTECA CENTRAL
000000512 856 L $$ahttp://www2.ciemat.es/documentales/biblioteca_central/415_IJ0376.pdf'
000000512 901 L $$aJUNTA DE ENERGIA NUCLEAR (J.E.N.)
000000512 902 L $$a13/07/89
000000512 FMT L BK

Bonjour Idiaz,

Code:

1
2
3
4
5
6
7
8
9
10
11
12
#!/bin/bash
 
while read -r line
do prefix=$(sed 's/\(.*[[:lower:]]\).*/\1/' <<<"$line")
   (
    IFS=';'
    set - $line
    echo "$1"
    shift
    [ -n "$1" ] && for y; do echo -e "${prefix}${y# *}"; done
    )
done < input_file

...
?

30/04/2010, 14h32
ldiaz

Salut
mon dieux que c'est beau !!! MERCI...ca marche carement bien.
Bravo et merci encore
Bon Week
03/05/2010, 08h43
ldiaz

Salut
moi de nouveau.
J'ai juste remarqué une detail qui j'espere pourrais etre modifié.
Tel que fonctionne ton scritp, tous les champs qui possède des ";" sont automatiquement splité... Est ce possible de choisir celui que l'on veut en particulier? J'avais pensé a mettre dans la ligne de commande le champs en question. Par exemple:

sh script.sh 653 >resulta.dat

¿c'est faisable ca?

D'avance merci

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
#!/bin/bash
[ -z "$1" ] && { echo "il faut donner une référence de ligne"; exit 1; } || refLine="$1"
while read -r line
do if [[ $line =~ ^[0-9]{9}\ $refLine ]]
   then
      prefix=$(sed 's/\(.*[[:lower:]]\).*/\1/' <<<"$line")
      (
       IFS=';'
       set - $line
       echo "$1"
       shift
       [ -n "$1" ] && for y; do echo -e "${prefix}${y# *}"; done
       )
   else echo "$line"
   fi
done < t

Salut
alors je fais ceci:

sh script.sh 653 >luis.dat

et ca marche plus...
j'ai ca dans l'original:
Code:

1 2 000000070 653 L $$aIMMUNE SERUMS;IODINATION;PITUITARY HORMONES;PRODUCTION;RADIOIMMUNOASSAY 000000070 653 L $$aVACIO
et ceci dans le nouveau fichier:
Code:

1 2 000000070 653 L $$aIMMUNE SERUMS;IODINATION;PITUITARY HORMONES;PRODUCTION;RADIOIMMUNOASSAY 000000070 653 L $$aVACIO

03/05/2010, 10h36
N_BaH
sh n'est pas bash ! et sh ne connaît pas [[ ... =~ ... ]]

pour lancer le script, il faut le rendre exécutable (chmod +x monScript),
puis le lancer (./monScript param1 param2...)
Code:

1 2 chmod +x monScript ./monScript 653 >luis.dat
03/05/2010, 11h19
ldiaz
Salut
apres avoir fais le chmod +x script.sh j'obtient ceci:
Code:

1 2 3 4 ./script.sh 653 > luis.dat ./script.sh: line 4: conditional binary operator expected ./script.sh: line 4: syntax error near `=~' ./script.sh: line 4: `do if [[ $line =~ ^[0-9]{9}\ $refLine ]]'
ca c'est les droits du fichier

Code:

-rwxr-xr-x 1 root root 434 may 3 10:09 script.sh

et si tu enleve le ~ ca donne pas d'erreur, mais ca split pas la ligne.

Qu'en penses-tu?
03/05/2010, 11h53
N_BaH

J'en pense que tu n'as pas dû mettre le bon shebang au tout début du script : #!/bin/bash n'est pas un commentaire optionnel ;)
ça indique au système quel shell utiliser. Si tu ne le mets pas, ou si le shell indiqué n'est pas disponible sur le système, le shell de l'utilisateur sera utilisé.

As-tu bash sur quelle distro ?
03/05/2010, 15h10
ldiaz

Salut
J'ai bien ceci au debut du script (j'ai fait un copié collé)
#!/bin/bash

par contre j'ai un linux un peu vieux redhat 3.
J'ai essayé sur redhat 4 et la j'ai pas le message d'erreur, par contre j'ai placé un test avec ceci:

000000003 251 L $$aTOTO;TATA;TITI

Donc comme tu vois le champs est 251, mais ca l'a pris quand meme dans le split.
J'ai fait ca:
./script 653 >toto.dat
ca aurait du prendre seulement le champs 653 je crois...Bref, c'est pas trop grave, perd pas de temps avec ca, sauf si t'as deja la soluce.

Merci encore

Ciao

ouaip, c'est bizarre; ça fonctionne bien avec bash-3.2 :koi:

par curiosité, que répond echo $BASH_VERSION ?

tu peux changer le if [[ de monScript, par celui de maFunc :
Code:

1 2 3 4 5 6 7 8 9 10 11 12 maFunc() { line="$1" refLine="$2" if [ "${line:10:3}" = "$refLine" ] then echo ok else echo KO fi } maFunc "000000003 251 L $$aTOTO;TATA;TITI" 653 KO maFunc "000000003 251 L $$aTOTO;TATA;TITI" 251 ok
...
?

et pareil pour $prefix, puisqu'il a une taille fixe :

Code:

prefix="${line::19}"

!

des fois je m'em...pêtre avec des regex, alors que ce n'est pas nécessaire :(

Salut

pour la curiosité:

echo $BASH_VERSION
3.00.15(1)-release

Voici le script final:
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 #!/bin/bash [ -z "$1" ] && { echo "il faut donner une rÃ©rence de ligne"; exit 1; } || refLi="$1" while read -r line #do if [[ $line =~ ^[0-9]{9}\ $refLine ]] do if [ "${line:10:3}" = "$refLine" ] then prefix=$(sed 's/$.*[[:lower:]]$.*/\1/' <<<"$line") ( IFS=';' set - $line echo "$1" shift [ -n "$1" ] && for y; do echo -e "${prefix}${y# *}"; done ) else echo "$line" fi done < source.dat
J'ai testé sur une autre machine (debian) echo $BASH_VERSION
4.0.33(1)-release

ca fait pareil...
Tu confirme que pour lancer le script en filtrant pour le champ 653 je fais:

./script.sh 653 >toto.dat

c'est bien ca?

03/05/2010, 16h06
N_BaH

Je confirme !

mais tu as une typo :

Code:

[...] } || refLi="$1"
03/05/2010, 16h48
ldiaz

Whaaa cool
cette fois c'est bon. Merci encore pour ton aide !!
Si t'as besoin d'aide sous Oracle, n'hezite pas.

Ciao