Discussion :

[kilicool]

Hello,

Je suis à la recherche du meilleur langage pour réaliser le programme suivant : en fonction de certains paramètres, dont une période à définir (minimum 1 mois), je vais devoir lire le contenu des fichiers et rechercher si des mots clefs sont présents dans les fichiers, si oui, conserver les lignes et les réécrire dans un fichier résultat.

Exemple : Aout 2016, mot clé "toto"

Je vais devoir parcourir une arborescence jusqu'2016, puis 08 (Aout) et dedans je vais me retrouver avec un dossier par jour qui contient 3 fichiers CSV compressés (TAR.GZ).
Sur l'un de ces fichiers CSV : je vais devoir décompresser le fichier et lire une "colonne" bien précise (dont il faut séparer avant par la "," chaque données) si elle contient ou pas le mot clé TOTO. Pour chaque ligne je vais devoir la garder dans un tampon (pour l'écrire plus tard) + garder une référence de cette ligne qui me permettra d'aller chercher les autres lignes correspondantes dans les 2 autres fichier (compressés aussi, en CSV aussi) qui seront aussi écrit à la fin.

A la fin, je dois me retrouver avec 3 fichiers correspondant a la période + mots clés.

Une idée ?

Merci

[liberforce]

Bonjour,

ça n'a pas l'air trop sorcier... Du bash avec tar, grep (pour chercher dans le fichier) et cut (pour lire une colonne en particulier) ou sed (pour traiter ligne à ligne) suffisent pour ça. Tu peux faire ça sans trop de mal en python aussi. Si tu es sous Windows, Python sera un meilleur choix que bash. Sous Linux l'un comme l'autre feront l'affaire.

[Luckyluke34]

Quel OS ? Un IDE/tooling de prédilection ou ça peut être n'importe lequel ?

Personnellement j'aurais tendance à faire ça en F# avec le type provider idoine. J'ai fait pas mal de moulinettes de traitement de fichiers avec, le typage automatique à partir du fichier et les primitives fonctionnelles de manipulation de listes simplifient beaucoup la tâche.

[Marco46]

+1 avec liberforce sur l'usage du bash, si la taille des fichiers est conséquente j'utiliserais plutôt Perl que Python. Perl sert très exactement à ce genre de tâches il a été conçu pour.

[daerlnaxe]

J'aurais dit aussi que ça dépendait de ton niveau. Si tu dois apprendre un langage de programmation en aussi peu de temps, je pense que python est franchement désigné pour le compromis puissance, rapidité d'apprentissage. Après il est clair que le bash, quand on connait bien est puissant, des gens pourront te donner même des commandes toutes faites qui en revanche devront te prendre quelques lignes sous Python (mais c'est pas un brin insurmontable du tout, ça fera juste quelques lignes en plus), après la vitesse de travail de Python comparé au Bash, il n'y a pas photo je trouve.