Lire fichier .csv MFC

Version imprimable

15/07/2010, 16h46
Golbut

Lire fichier .csv MFC

Bonjour, je fais appel à vous, car vous êtes professionnels, et moi non...
Donc voilà j'ai un fichier .csv avec plusieurs colonnes et plusieurs ligne. (logique)
Je travaille sur un projet qui viendra lire dans ce mapping.
J'aimerais savoir comment se deplacer dans ce mapping, changer de ligne, et de colonne...
Merci de votre aide.

PS: j'ai déjà pas mal cherché.
15/07/2010, 17h01
Invité

Bonjour,
La caractéristique d'un fichier CSV est d'avoir des lignes, mais pas de colonnes.
15/07/2010, 17h22
Mat.M

Citation:

Envoyé par Golbut

Je travaille sur un projet qui viendra lire dans ce mapping.
J'aimerais savoir comment se deplacer dans ce mapping, changer de ligne, et de colonne...

Il faut d'abord
-lire le fichier et le décortiquer ( on appelle cela "parser" en anglais )
-puis charger les informations dans un conteneur comme CMapString,CArray etc....
Pour le lire et l'analyser un simple fopen/fread ou un CFile suffit
Sinon tu peux passer par un objet Excel avec Automation mais c'est bien plus complexe.
Pour analyser il y a peut-être des méthodes COM/Automation pour exploiter ton fichier .csv

regarder ici
http://www.codeproject.com/KB/office...-%20MS%20Excel
15/07/2010, 19h00
Invité

Pour lire un fichier non formaté mais organisé en lignes, la fonction fgets() semble toute indiquée. Ensuite, suivant les cas, soit on fait une recherche de séparateur, souvent le ';', soit on utilise sscanf(). Ces deux méthodes ne sont d'ailleurs pas exclusives.
15/07/2010, 22h25
Golbut

Donc moi j'ai mon fichier, qui comporte ces informations par ligne :
Octet - Variable - Affichage - Active

Donc j'arrive à aller chercher affichage, mais pas les lignes correspondante, par exemple j'aimerais pourvoir faire : colonne affichage (numero 2), ligne 4
Possible ?

Methode pour parser un fichier ?

C'est un fichier avec séparateur ";"
15/07/2010, 23h23
Invité

"Parser" est un mot que je ne connais pas.
La lecture d'un fichier au format CMS n'est même pas un cas d'école, c'est une opération élémentaire.
16/07/2010, 09h48
Golbut

Mais moi j'ai un fichier CSV pas CMS
16/07/2010, 10h18
fregolo52

Peux-tu nous donner un 'vrai' exemple de contenu de fichier (avec 3-4 lignes) ? ca sera plus clair pour nous.

CSV : Comma-separated values
Donc, le caractère séparateur est la virgule. Mais bon, le point-virgule existe aussi.

Ma version d'excel ne reconnais pas le ';', il m'affiche tout dans 1 colonne, alors qu'avec la virgule, ca marche bien.
16/07/2010, 10h29
Golbut

1 pièce(s) jointe(s)

Citation:

Envoyé par fregolo52

Peux-tu nous donner un 'vrai' exemple de contenu de fichier (avec 3-4 lignes) ? ca sera plus clair pour nous.

CSV : Comma-separated values
Donc, le caractère séparateur est la virgule. Mais bon, le point-virgule existe aussi.

Ma version d'excel ne reconnais pas le ';', il m'affiche tout dans 1 colonne, alors qu'avec la virgule, ca marche bien.
16/07/2010, 12h02
white_tentacle

Je crois que l'idée, c'était de poster le fichier ouvert avec un éditeur de texte, pas dans excel :).

Sinon, mal lire un fichier csv, c'est trivial, mais sinon, il y a des subtilités à respecter (notamment si le csv peut contenir des sauts de ligne).

Citation:

Envoyé par white_tentacle

Je crois que l'idée, c'était de poster le fichier ouvert avec un éditeur de texte, pas dans excel :).

Sinon, mal lire un fichier csv, c'est trivial, mais sinon, il y a des subtilités à respecter (notamment si le csv peut contenir des sauts de ligne).

Autant pour moi :
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 Octet;Type;Variable;Affichage;Active ;;;; 0;A16;GEN_0;Type carter;x 1;;GEN_1;;x 2;;GEN_2;;x 3;;GEN_3;;x 4;;GEN_4;;x 5;;GEN_5;;x 6;;GEN_6;;x 7;;GEN_7;;x 8;;GEN_8;;x 9;;GEN_9;;x 10;;GEN_10;;x 11;;GEN_11;;x 12;;GEN_12;;x 13;;GEN_13;;x 14;;GEN_14;;x 15;;GEN_15;;x 16;A2;GEN_16;Variante du type;x 17;;GEN_17;;x 18;D16;GEN_18;Numéro du type;x 19;;GEN_19;;x 20;D8;GEN_20;Numéro brut;x 21;A1;GEN_21;;x 22;A1;GEN_22;Code PIE 1;x 23;A1;GEN_23;Code PIE 2;x 24;A1;GEN_24;Code PIE 3;x 25;A1;GEN_25;Code PIE 4;x 26;A1;GEN_26;Code PIE 5;x 27;A1;GEN_27;; 28;D16;GEN_28;Dernière OP travaillée;x 29;;GEN_29;;x 30;X16;GEN_30;Carton Rouge;x

16/07/2010, 14h03
white_tentacle

Bon, et maintenant, décris nous précisément le problème ? Qu'est-ce que tu n'arrives pas à faire ? As-tu regardé les liens qui t'ont été donnés ?

Parce que vu le format de ton fichier, le lire sera très simple.
16/07/2010, 14h33
Golbut

Donc moi je n'arrive pas à changer de ligne.
Ce que je veux, c'est me fier à variable, comme un indice dans une BDD, et recuperer tous les champs correspondants.
Mais je me casse la tête avec l'algo, et j'arrive pas à controler l'endroit où je veux lire.
Besoin de plus d'infos ? (oui j'ai regardé le lien, mais sans succès, et j'ai fait des recherches sur "parser" mais il n'y a pas ce que je veux"
16/07/2010, 14h43
Invité

Bonjour Golbut,
D'abord, pardon pour le lapsus, je voulais naturellement parler de fichier CSV.
Je pense que la question posée par White_tentacle est "qu'est-ce que vous voulez faire".
Il n'y a pas d'algorithme là-dedans.
"Changer de ligne" pourquoi pas?, mais pourquoi changer de ligne?
Comme chose que vous pourriez vouloir faire, ce pourrait être par exemple "compter les lignes où la quatrième position n'est pas vide".
16/07/2010, 15h08
Golbut

En fait, ce mapping est lié à une puce RFID.
Dans cette puce on stock des infos.
Ce que je dois faire, un programme en c++ qui affiche des boites de dialogues (environnement pocket PC 2005). Dans une des boites de dialogue, je dois afficher les données de la colonne "Affichage" et les valeurs lues dans la puces.
Le champ variable lui est associé à une zone mémoire. En gros : si l'utilisateur demande à afficher les données de la zone générale, je dois me fier à la colonne "Variable" et n'afficher que les "Affichage" et les données correspondant aux variable commençant par "GEN_XX" (où x est un nombre).

Autre exemple, je dois afficher les donnée de la zone OP_200, je dois chercher dans le mapping, les champs "Affichage" de l'op200. Donc je serais d'avis à chercher dans le fichier .csv, dans la colonne variable, "OP200_XX" et tant que la "Variable" s'appelle "OP200_XX", je recupère octets, "affichage"

Plus d'infos ?
16/07/2010, 15h21
jblecanard

Salut

Ce qui n'est pas clair, c'est où tu coinces ? Pour lire le fichier ligne par ligne, il y a un exemple tout cuit dans la doc de la lib standard, ici, version C++ avec getline, (car fgets, c'est du C). En t'inspirant de ça et de la doc des autres méthodes, tu devrais pouvoir t'en sortir.

Sur le plan algorithmique, vu que tes requêtes ont l'air simple, il suffit de lire ligne par ligne et de garder l'info contenue par la ligne si elle correspond au critère.
16/07/2010, 15h39
Golbut

Bah, je crois pas être capable de faire ça... Je vais voir avec ce que tu m'as donné. Je vous tiens au courant
16/07/2010, 17h24
gl

Citation:

Envoyé par white_tentacle

Sinon, mal lire un fichier csv, c'est trivial

J'aurais plutôt dis : "lire un fichier CSV respectant certaines contraintes (comme l'absence de saut de ligne dans les données) est triviale".

Car bien souvent si les cas les plus complexes sont ignorés c'est tout simplement parce que l'on écrit des parser spécifiques à un type de fichier bien défini qui n'accepte pas forcément les cas les plus tordus (qui sont alors traité comme des erreurs de fichier).

Ce qui est par contre extrêmement complexe c'est d'écrire un parser CSV générique.
16/07/2010, 17h40
Invité

Bonjour,
J'ai un peu de mal à imaginer un CSV sans saut de ligne, suivant le principe que le rang du champ est donné par son numéro d'ordre dans la ligne en cours, c'est à dire par rapport au saut de ligne juste précédent.
Fichier CSV générique : quelles seraient les hypothèses?
16/07/2010, 18h13
gl

Citation:

Envoyé par Pierre Dolez

Bonjour,
J'ai un peu de mal à imaginer un CSV sans saut de ligne, suivant le principe que le rang du champ est donné par son numéro d'ordre dans la ligne en cours, c'est à dire par rapport au saut de ligne juste précédent.
Fichier CSV générique : quelles seraient les hypothèses?

Je n'ai pas dit sans saut de ligne, j'ai dit sans saut de ligne dans les données.
Pour être plus précis, il est possible dans un CSV de placer un champ entre " et d'utiliser à l'intérieur de celui des sauts de lignes, ces sauts de lignes n'indiquent pas un changement d'enregistrement mais font bel et bien parti de la donnée. Ainsi le fichier:

Citation:

A1;B1;C1
A2;"B
2";C2

Défini bien deux enregistrements contenant chacun trois champs. Le second champ du second enregistrement valant "B\n2".
Le même genre de chose existe pour avoir un séparateur dans un champ.

Ce genre de construction est bien souvent ignoré par les parser. Tout particulièrement lorsqu'ils sont développés pour répondre à un besoin spécifique pour lequel il n'y a pas de sens à avoir de saut de ligne ou de séparateur à l'intérieur d'une donnée.

Si par contre le parser se veut générique, il faut bien qu'il soit capable de gérer ces cas de figure.
16/07/2010, 19h28
Invité

Merci, j'ignorais cette finesse.
Moi, j'aurais écrit

Citation:

A1;B1;C1
A2;B\\n2;C2
ou
A1;B1;C1
A2;"B\n2";C2
ou même
A1;B1;C1
A2;"B\\n2";C2

Mais cela est-il bien dans l'esprit d'un CSV?
17/07/2010, 15h45
koala01
Salut,

De manière générale, tu ne pourra pas utiliser une formule simple pour déterminer l'offset du fichier auquel tu dois aller pour lire la Nième donnée.

La raison est simple: le nombre de caractères qui composent l'ensemble des informations relatives à une donnée varie beaucoup trop:

Code:

1;;GEN_1;;x

utilise 11 caractères

Code:

10;;GEN_10;;x

en utilise déjà 13... Et je ne parle pas de

Code:

0;A16;GEN_0;Type carter;x

qui en utilise 25 ni de

Code:

28;D16;GEN_28;Dernière OP travaillée;x

pour lequel je renonce à compter :aie:

De plus, il faut se rappeler que les temps d'accès à un fichier sont particulièrement grand comparer aux temps d'accès à la mémoire.

Il y a donc très largement intérêt à lire l'ensemble du fichier en une fois de manière à créer une collection (un tableau) de données permettant de représenter les différentes informations contenues dans le fichier.

Cela pourrait se baser sur une structure proche de
Code:

1 2 3 4 5 6 7 8 struct Data { int octet; std::string type; std::string variable; std::string affichage; bool archive; };
(ou l'équivalent MFC).

Tu commencerais, au lancement de l'application, par lire ton fichier, ligne par ligne, et par remplir un tableau de Data dont les différents champs seraient définis sur base de ce que tu lis dans le fichier.

Tout le reste du travail s'effectuerait sur base de se tableau.

Il ne faudra pas oublier de sauvegarder les données au plus tard juste avant de quitter l'application si elle y a apporté des modifications / ajouts ;)
19/07/2010, 10h23
Golbut

Bonjour,
alors j'ai essayé pas mal de truc. Je pense que le plus important à l'heure actuelle, c'est que je réussie à detecter une chaine de caractère, par exemple trouver la colonne "variable". Est ce que je peux jouer avec le numéro de colonne, puisque la colonne variable est toujours au même endroit. Ensuite rechercher dans toute cette colonne les "GEN_XX" puis recuperer les données associées.
Cependant je ne voit donc pas comment dire "va chercher toujours les données de la colonne 3". Et comment incrementer mon string "GEN_XX" ?
19/07/2010, 11h21
white_tentacle

J'ai l'impression que tu ne prends pas la bonne approche. Relis bien le message de Koala.

L'idée, c'est que tu lises tout ton fichier, et qu'au fur et à mesure de la lecture, tu remplisses un std::vector de ta structure Data. Pour chaque enregistrement, tu peux récupérer facilement les valeur de la colonne 0, 1, 2, etc, et les associer à la valeur correspondante de la structure data.

Ensuite, tu pourras parcourir ce vector pour retourner, par exemple, un nouveau std::vector, de std::string cette fois-ci, contenant toute la liste des données de la colonne 3.

Me revoilà,
alors, j'ai pas mal cherché, et j'ai trouvé l'equivalent d'une fonction split pour MFC. Cette fonction est censée me retourner un tableau dans lequel sont inscrits tous les champs lus, ça m'aidera surement a bien me retrouver par la suite. Mais sans resultats pour le moment. Si vous avec une petite idée.

La fonction principale

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
 
FILE * fichierCsv;			// Nom du fichier qu'on va utiliser
	char * cToken;	       // Buffer du contenu des valeurs d'une ligne
	char * cToken2;	      // Buffer du contenu des valeurs d'une ligne
	char cBuffligne[1500] = "";	// Buffer du contenu de la ligne du fichier
	CString ligne;
	int iCompteur = 0;	// Compte le nombre de fois où on boucle
	int colonneProprietaire;
	CString delimiter = _T(";");
	CStringArray result;
 
	if(( fichierCsv = fopen ("mapping.csv","r")) != NULL)//Si pas de problème lors de l'ouverture du fichier														
	{
 
		while(fgets(cBuffligne,sizeof(cBuffligne),fichierCsv)!= NULL)//pour toute les lignes du fichier ou jusqu'a ce que "d" soit faux
		{
			ligne = _T("");
			for(int i = 0 ; i<sizeof(cBuffligne); i++)
			{
				ligne += cBuffligne[i];
			}
 
			SplitString(ligne,delimiter,result);
                }

La fonction split

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
int CCsvDlg::SplitString(const CString& input, 
  const CString& delimiter, CStringArray& results)
{
  int iPos = 0;
  int newPos = -1;
  int sizeS2 = delimiter.GetLength();
  int isize = input.GetLength();
 
  CArray<INT, int> positions;
 
  newPos = input.Find (delimiter, 0);
 
  if( newPos < 0 ) { return 0; }
 
  int numFound = 0;
 
  while( newPos > iPos )
  {
    numFound++;
    positions.Add(newPos);
    iPos = newPos;
    newPos = input.Find (delimiter, iPos+sizeS2+1);
  }
 
  for( int i=0; i <= positions.GetSize(); i++ )
  {
    CString s;
    if( i == 0 )
      s = input.Mid( i, positions[i] );
    else
    {
      int offset = positions[i-1] + sizeS2;
      if( offset < isize )
      {
        if( i == positions.GetSize() )
          s = input.Mid(offset);
        else if( i > 0 )
          s = input.Mid( positions[i-1] + sizeS2, 
                 positions[i] - positions[i-1] - sizeS2 );
      }
    }
    if( s.GetLength() > 0 )
      results.Add(s);
  }
  return numFound;
}

20/07/2010, 10h24
white_tentacle

Le problème n'est pas dans le code, il est avant tout algorithmique. Il faut d'abord trouver l'algorithme qui répond à ton problème, sinon se lancer dans l'écriture d'un code approximatif ne servira pas à grand chose.

Ici tu as plusieurs étapes, qui peuvent être fait en parallèle ou pas :
- lire le contenu du fichier
- identifier chaque ligne du fichier
- splitter chaque ligne selon le caractère ';'
- remplir une structure en mémoire correspondant au contenu de ton fichier

Dans le code que tu montres, il manque la dernière étape. Cela dit, je pense que tu as les éléments pour les faire.
20/07/2010, 11h16
Golbut

C'est ce que je fais, j'ouvre mon fichier, je recupere la ligne, je split, et j'envoie vers une structure (enfin j'essaie, j'ai declaré ma structure, mais quand je fais mapping.variable, il crash)
20/07/2010, 11h55
white_tentacle

Désolé mais si tu ne postes pas le code qui plante, ça va être difficile de t'aider.

Dans le code que tu as posté, je ne vois ni la structure, ni le code qui ajoute des choses dedans...

Désolé, j'ai avancé, donc ça remplit pas ma structure. mon result[0] à toujours la même valeur, malgrès que je change de ligne

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
void CCsvDlg::OuvrirCsv()
{
 
	FILE * fichierCsv;									// Nom du fichier qu'on va utiliser
	char cBuffligne[150] = "";							// Buffer du contenu de la ligne du fichier
	CString ligne;
	CString delimiter = _T(";");
	CStringArray result;
	CString tab = _T("");
 
	if(( fichierCsv = fopen ("mapping.csv","r")) != NULL)//Si pas de problème lors de l'ouverture du fichier														
	{
		MAPPING mapping;
		//if (fgets(cBuffligne,sizeof(cBuffligne),fichierCsv) != NULL)	
		while(fgets(cBuffligne,sizeof(cBuffligne),fichierCsv)!= NULL)//pour toute les lignes du fichier ou jusqu'a ce que "d" soit faux
		{
 
 
			ligne = CString(cBuffligne);
			SplitString(ligne,delimiter,result);
 
			mapping.variable = result[0]
 
		}
	}fclose(fichierCsv);
}

et ma structure

Code:

1
2
3
4
5
6
7
8
typedef struct 
{
	CString variable;
	CString activer;
	int octet;
	CString affichage;
	CString type; 
}MAPPING;

Edit : probleme resolu, le CString results est alloué à chaque changements de ligne

CStdioFile en MFC non ? Avec CStdioFile::ReadString ça t'évitera d'horribles lignes du genre char cBuffligne[150] = ""; :mouarf:
Et si tu restes 100% MFC, il me semble me souvenir d'un CArray qui pourrait faire l'affaire pour stocker tes lignes.
A la volée (car je n'ai pas de MFC sous la main), ce devrait être quelque chose comme ça :
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 void CCsvDlg::OuvrirCsv() { CStdioFile fichier; CString ligne; CString delimiter = _T(";"); CStringArray result; CArray<MAPPING> tableau_resultat; if(( fichier.Open(_T("mapping.csv"),CFile::modeWrite)))//Si pas de problème lors de l'ouverture du fichier { MAPPING mapping; while(fichier.ReadString(ligne))//pour toute les lignes du fichier ou jusqu'a ce que "d" soit faux { SplitString(ligne,delimiter,result); mapping.variable = result[0]; tableau_resultat.Add (mapping); } } }