Discussion :

[folks]

Bonjour,

j'aimerais écrire un script shell qui lis un fichier texte contenant plusieurs lignes et chaque ligne contient des informations séparés par des tabulations. je voudrais donc séparer ces informations sachant que chaque ligne est indépendante des autres.
Le but serais ensuite de stocker les informations récuperés dans une base de donné


Mes connaissances en script shell étant assez limité je voudrais savoir si quelqu'un pourrait m'aider.
donc comment récupérer ligne par ligne puis séparés par des tabulations.

et si possible aussi m'indiquer comment stocker ces info dans une base.


merci !!

[laurentschneider]

certains outils, style Oracle SQL Loader, permettent d'importer et de transformer des données directement. Sinon il y awk,perl et companie

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
 
$ awk '{printf "\042%s\042,%d,\042%s\042\n",$1,$2,$5}' FS=: /etc/passwd
"root",0,"root"
"bin",0,"bin"
"daemon",0,"Daemon"
"lp",0,"Printing daemon"

[ripat]

Quelle est ta bdd ?

[folks]

j'utilise une base de donnée MySQL


voici le format du fichier que j'aimerais decouper

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
 
V0LOUR      002243xxxx060418170117011710   582   565   124006309    0
V0LOUR      002243xxxx060418170117011710   582   565   124006309    0
V0LOUR      002243xxxx060418170117011710   582   565   124006309    0
...

j'aimerais donc separer les valeur separés par des tabulations et les injecter dans
ma base, en fait une table de la base dont chacun des ces info correspond à un champs (enfin je voudrai aussi séparer le 2eme champs en plusieurs partie car il contient plussieurs info)


Sinon ca confirme ce qu'on m'a dis le perl est tres bien pour ce que je veux faire,mais le souci c'est que je touche pas une bille en perl. La c'est meme plus de l'aide qui me faudrais. Mais sait on jamais si une ame charitable dans un grand élan de bonté me fait un script pourquoi pas. Enfin on peut toujours rever !


merci pour vos reponses !

[ripat]

Tu peux importer ce fichier directement dans MySQL avec:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
LOAD DATA INFILE 'ton_fichier.txt'
INTO TABLE ta_table
FIELDS TERMINATED BY '\t' 
LINES TERMINATED BY '\n';

Si ton fichier est en format windows, songe à remplacer les fins de lignes par \r\n.

[folks]

merci c'est cool !!
je vais tester ca aussi

mais avec cette methode se pose le probleme de mon champs que je veux couper en plusieurs partie parce qu'il contient plusieurs info qui correspond à des champs differents de la base
ouais je sais suis un




merci encore

[ripat]

merci c'est cool !!
je vais tester ca aussi

mais avec cette methode se pose le probleme de mon champs que je veux couper en plusieurs partie parce qu'il contient plusieurs info qui correspond à des champs differents de la base
ouais je sais suis un

Non, non. Un forum est fait pour ça.

Dans ce cas effectivement tu pourras traiter le fichier avant injection dans MySQL.

Quel champ dois-tu scinder et où. Pourrais-tu donner un exemple.

[folks]

en fait il y en a plusieurs des champs a scinder, en gros les 2 premiers

voici comment je devrai les decouper :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
 
V0LOUR      002243xxxx060418170117011710
 
V0 - LOUR      002243xxxx - 060418170 - 117011710

sachant que les valeurs peuvent varier d'une ligne à l'autre


voila !

merci

[ripat]

Si tes enregistrements doivent toujours être découpés au même endroit, essaye ceci:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
cat ton_fichier |
 awk -v OFS=";" '{print substr($1, 1, 3), substr($1, 4), substr($2, 1, 10), substr($2, 11, 9), substr($2, 20)}'

[MarcG]

pourquoi un cat et | ?

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
 
awk -v OFS=";" '{print substr($1, 1, 3), substr($1, 4), substr($2, 1, 10), substr($2, 11, 9), substr($2, 20)}' ton_fichier

[ripat]

pourquoi un cat et | ?

Aucune raison particulière. Mauvaise habitude sans doute...

[folks]

merci,
il est vraiment exelent ce script, je connaissais pas awk c'est super puissant

mais j'ai encore un petit souci, enfin pour l'instant, j'en aurais surement d'autre
c'est que je vois pas comment stocker les champs séparé dans un tableau 2D pour pouvoir séparer d'abord par ligne puis par champs

et j'aimerais savoir si on peut faire des INSERT dans une base avec ce script ?


encore merci !!

[ripat]

Désolé mais je ne comprends pas la question. Pourrais-tu mettre un petit exemple?