Parser dynamiquement fichier txt

Bonjour, petit casse tête pour vous aujourd'hui.

Voilà le topo, je dois créér un petit programme qui demande à l'utilisateur d'entrer un masque du type [Attribut1] [Attribut2] / [[Attribut3]] qui correspondrait par exemple dans la réalité à un annuaire de cette forme :

DUJARDIN Jean / [2012-04-08 01:02:03]
MERAH Mohammed / [2012-05-02 08:04:03]
SARKOZY Nicolas / [2011-03-01 10:02:09]

/!\ Les fichiers à parser sont tous formatés différement, d'où le coté "dynamique".

Je dois ensuite, à l'aide de ce masque, parser le fichier. Pour se faire, j'ai analysé le masque pour capturer le nom des Attributs. Ensuite, j'ai capturé les séparateurs entre un [Attribut] et un autre [Attribut].

Me voilà donc avec le nom des attributs, leur nombre, les séparateurs et leur nombre.

Comment parser ce fichier en ayant cela ? Des idées ?

Je ne peux décemment pas utiliser de Regex car le masque ne m'apporte pas assez de précision. J'ai tenté de spliter avec ma liste de séparateur, mais du coup il split dès qu'il voit un espace.

Je vous remercie !

Salut

peut d'abord parse avec le / tu obtiendras deux group
attribut1 attribut2 groupe1
attribut3 groupe2

parse après le groupe1 avec l'espace

Citation:

---

Envoyé par shayw

Salut

peut d'abord parse avec le / tu obtiendras deux group
attribut1 attribut2 groupe1
attribut3 groupe2

parse après le groupe1 avec l'espace

---

Ce n'est pas envisageable, car si en effet ce que tu dis marche dans l'exemple simpliste que j'ai donné plus haut, il n'en va pas de même pour d'autres.

Et puis même, ce n'est pas assez dynamique pour moi :). Clairement, mon logiciel doit pouvoir parser, et ceux sans savoir à quoi ressemble le fichier log.


Ce que j'envisageai de faire, c'est tout de même d'essayer de traduire le masque en une regex. Former une regex à l'aide de mes séparateurs. En faite ça parait évident :?.

perso je trouve que les noms de ton exemple sont pas très judicieux!!!!!

Citation:

---

Envoyé par gcorbineau

perso je trouve que les noms de ton exemple sont pas très judicieux!!!!!

---

Je savais que l'exemple Jean Dujardin ne plairait pas à tout le monde. C'est mon petit coté provocateur.

Sinon je confirme que cela marche. :ccool:
Merci pour ta réponse shayw, et désolé pour le post inutile.

si tu nous donnes un exemple faux, on va te donner des solutions fausses

les regex sont beaucoup moins performant que des split, indexof et autres substring, sur quelques lignes ce n'est pas grave, mais si tu as des milliers de lignes c'est à prendre en compte

après pour les noms et prénoms le cas classique c'est les noms et/ou prénoms composés
si ton séparateur est un espace ce n'est pas la peine de commencer coder :D

au final si tu veux pouvoir décomposer des strings sans le coder en dur dans l'appli, il faut que le code soit créé pendant l'exécution
pour ca il faut mettre le paramétrage dans un fichier ou une base de données
et faire un éditeur dans l'appli pour permettre de définir un décodage de fichier
ce paramétrage peut etre directement du code vb.net, ca évite d'avoir à modéliser des instructions graphiquement, et on peut compiler du code à la volée

Citation:

---

Envoyé par gcorbineau

perso je trouve que les noms de ton exemple sont pas très judicieux!!!!!

---

ce ne sont que des exemples ...

Pourquoi ne pas transformer le pattern en pattern de regexp ?

[Attribut1] [Attribut2]/[[Attribut3]]

A priori, devrait être transformé en un truc du genre : "(.*) (.*)/\[(.*)\]"

Ensuite, tu n'as plus qu'à parcourir les Matches.

Citation:

---

Clairement, mon logiciel doit pouvoir parser

---

mais il te faut au moins une base :roll:
comment as tu parsé ton ex selon attribut1 attribut2 attribut3
essaie de donner un autre ex pour mieux illustrer

Citation:

---

Envoyé par StringBuilder

Pourquoi ne pas transformer le pattern en pattern de regexp ?

[Attribut1] [Attribut2]/[[Attribut3]]

A priori, devrait être transformé en un truc du genre : "(.*) (.*)/\[(.*)\]"

Ensuite, tu n'as plus qu'à parcourir les Matches.

---

C'est exactement ce que je me suis décidé à faire. Mais du coup je bloque sur la partie "tu n'as plus qu'à parcourir les Matches".

Je souhaite stocker chaque match dans un attribut d'un de mes objets.
Les attributs de cet objet s'appellent Attribut1, Attribut2, Attribut3, ... (pas très original je sais).

En gros, je veux faire un équivalent de ça :

Code:

---

1 2 3

for i=0 to NombreDeMembre-1 Do objet.attribut[i] = _m.Groups(i).Value end for

---

Donc ce bout de code est faux, je le sais, mais c'est pour vous faire saisir l'idée de ce que je veux arriver à faire... Etant donné que je ne sais pas combien d'attributs il y aura à parser, si j'arrive à faire l'idée ci-dessus, ce ne sera plus un problème.

Citation:

---

Envoyé par Pol63

si tu nous donnes un exemple faux, on va te donner des solutions fausses

---

Oui mais j'ai quand même bien précisé qu'il me fallait trouver une solution dynamique qui puisse s'adapter à n'importe quel fichier à parser :).

Citation:

---

Envoyé par Pol63

les regex sont beaucoup moins performant que des split, indexof et autres substring, sur quelques ce n'est pas grave, mais si tu as des milliers de lignes c'est à prendre en compte

---

C'est bon à savoir, parce que c'est un peu mon cas. A voir.

Citation:

---

Envoyé par Pol63

après pour les noms et prénoms le cas classique c'est les noms et/ou prénoms composés
si ton séparateur est un espace ce n'est pas la peine de commencer coder :D

---

En faite il s'agit de fichier log avec log4net, mais vu qu'il n'y a pas de standard dans mon entreprise, ben ils sont tous formatés différement... Et moi je dois parser là-dessus !

Citation:

---

Envoyé par Pol63

au final si tu veux pouvoir décomposer des strings sans le coder en dur dans l'appli, il faut que le code soit créé pendant l'exécution
pour ca il faut mettre le paramétrage dans un fichier ou une base de données
et faire un éditeur dans l'appli pour permettre de définir un décodage de fichier
ce paramétrage peut etre directement du code vb.net, ca évite d'avoir à modéliser des instructions graphiquement, et on peut compiler du code à la volée

---

Je leur soumettrai l'idée en effet. Merci

Citation:

---

Envoyé par shurikeNzL

Je souhaite stocker chaque match dans un attribut d'un de mes objets.
Les attributs de cet objet s'appellent Attribut1, Attribut2, Attribut3, ... (pas très original je sais).

---

Regarde du côté de la réflexion pour faire ça.

Attention aux performances en revanche.

Autre solution, tu utilises un dictionnaire : la clé est le nom de l'attribue, et la valeur sa valeur. Ça permet d'éviter d'utiliser la réflexion. En revanche, ça permet de stocker tout et n'importe quoi dans ton dictionnaire, sans pour autant respecter la moindre règle. Tu peux cependant coupler ça a un contrôle des noms d'attributs et de leurs valeurs.

Citation:

---

Envoyé par StringBuilder

Regarde du côté de la réflexion pour faire ça.

Attention aux performances en revanche.

Autre solution, tu utilises un dictionnaire : la clé est le nom de l'attribue, et la valeur sa valeur. Ça permet d'éviter d'utiliser la réflexion. En revanche, ça permet de stocker tout et n'importe quoi dans ton dictionnaire, sans pour autant respecter la moindre règle. Tu peux cependant coupler ça a un contrôle des noms d'attributs et de leurs valeurs.

---

Bien vu merci, je vais utiliser ta deuxième solution, qui me parait plus simple que la première hors de ma portée à mon avis.

Je te donne un petit projet qui fait un peu ce que tu cherches à faire (au détail près que l'implémentation choisie est de prendre des fichiers "à pas fixe").

A partir d'un fichier XML qui décrit les champs à lire (notamment leur type), je charge un fichier dans des objets dont les attributs sont typés : ça permet donc de charger une date au format Datetime ou un entier au format int, pour faire des traitements dessus par la suite.

Tu peux donc t'en inspirer pour gérer la partie chargement de la valeur dans un attribut.

Juste un détail : j'ai écrit ce code "pour le fun", je ne suis pas certain qu'il soit complètement terminé. Mais bon, ça pourra te donner des sources d'inspiration !

Citation:

---

Envoyé par StringBuilder

Autre solution, tu utilises un dictionnaire : la clé est le nom de l'attribue, et la valeur sa valeur. Ça permet d'éviter d'utiliser la réflexion. En revanche, ça permet de stocker tout et n'importe quoi dans ton dictionnaire, sans pour autant respecter la moindre règle. Tu peux cependant coupler ça a un contrôle des noms d'attributs et de leurs valeurs.

---

Le dictionnaire me semble être une bonne solution à mon problème, mais lorsque je passe dans cette fonction :

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20

Function ParserLigne(ByVal Ligne As String, ByVal Regex As Regex, ByVal nombreMembre As Integer) As Log Dim _nouveauLog As New Log Dim _m As Match = Regex.Match(Ligne) Dim _dico As New Dictionary(Of Integer, String) _dico.Add(0, _nouveauLog.Attribut1) _dico.Add(1, _nouveauLog.Attribut2) _dico.Add(2, _nouveauLog.Attribut3) _dico.Add(3, _nouveauLog.Attribut4) _dico.Add(4, _nouveauLog.Attribut5) _dico.Add(5, _nouveauLog.Attribut6)   ' C'est parfaitement ce que je souhaitais faire. If (_m.Success) Then For i = 0 To nombreMembre -1 dico(i) = _m.Groups(i).Value Next End If ' Mais le probleme c'est que les valeurs que j'ai mise dans le dico ne sont pas réellement affectées aux attributs de _nouveauLog. Du coup la fonction retourne que des nothing... Qu'est-ce que je n'ai pas compris ? Return _nouveauLog End Function

---

Merci pour ton code, je regarde ça ce soir, je ne suis pas autorisé à DL à l'entreprise ;).

c'est le dictionnaire que tu n'as pas compris apparemment :D
si c'est pour avoir un index de 0 à n-1 un list suffit
le dictionaire permet d'avoir des clés typées différements, ou un index non suivi

en l'occurrence je pense qu'il te proposait le dictionaire pour mettre le string du nom de l'attribut en clé
ce qui permet de faire dico.add(nomattribut,valeurattribut)

Désolé, je vais te répondre avec du pseudo code C# mais bon... c'est aisément compréhensible.

Tes attributs doivent être transformés en accesseurs :

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14

class MaClass { private Dictionnary<int, string> dico;   public string Attribut1 { get { if (!dico.Exists(1)) return null; return dico[1]; } } }

---

PS : Si tu utilise un dico dont la clé est un entier, alors utiliser un array de string à la place, ça sera plus performant.

Citation:

---

Envoyé par Pol63

c'est le dictionnaire que tu n'as pas compris apparemment :D
si c'est pour avoir un index de 0 à n-1 un list suffit
le dictionaire permet d'avoir des clés typées différements, ou un index non suivi

en l'occurrence je pense qu'il te proposait le dictionaire pour mettre le string du nom de l'attribut en clé
ce qui permet de faire dico.add(nomattribut,valeurattribut)

---

C'était ça l'idée en effet. :ccool:

Après, on peut le masquer en faisant des accesseurs, mais je trouve que c'est aussi pratique de travailler directement sur le dictionnaire, à moins qu'on ait des contrôles évolués à faire en amont (vérifier le format de la valeur, vérifier que si Paul a un chapeau, alors Jean a bien pris ses bottes, etc.)

Voilà, j'y suis arrivé, je vous remercie ;).
Je vais pouvoir passer un weekend sans cauchemareder. :ccool: