Problèmes exportation dans fichier *.txt

**mamour71** · 07/12/2011, 12h37

Bonjour à tous,

Je monte un programme permettant de traité des données issues d'un fichier .txt que j'aimerai enregistré dans un autre fichier *.txt.

j'ai établi un code permettant d'enlever les entêtes, de supprimer des ' " ', de remplacer des espace par des virgules et vis versa.

voici le code:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
format long
svt='essai 1.txt';
 
%% Enlever les en têtes
 
fid=fopen(svt,'r');
N=4;
for n=1:N;
    fgetl(fid);
end
X=fread(fid);
fid=fopen('dada.txt','w');
fwrite(fid,X);
fclose(fid);
clear X
clear N
clear fid
 
%%Enlever les '"'
 
fid=fopen('dada.txt','r');                
X=fread(fid);   
%modification des paramètres
idx=strrep(X,'"','');
fid=fopen('dada.txt','w');
fwrite(fid,idx);
fclose(fid);
clear X;
clear fid;
clear idx;
 
%%Enlever les 'espace' et remplacer par des ','
 
fid=fopen('dada.txt','r'); 
X=fread(fid);                
%modification des paramètres
idx=strrep(X,' ',',');
fid=fopen('dada.txt','w');
fwrite(fid,idx);
fclose(fid);
clear X;
clear fid;
clear idx;
 
%Enlever les ',' et remplacer par des 'espaces'
 
fid=fopen('dada.txt','r');
X=fread(fid);   
%modification des paramètres
idx=strrep(X,',',' ');
fid=fopen('dada.txt','w');
fwrite(fid,idx);
fclose(fid);
clear X;
clear fid;
clear idx;
 
%% transformation du fichier txt en colonne avec format adequat et stockage
%% dans une cellule 'Scan'
 
fid=fopen('dada.txt');           
Scan=textscan(fid,'%s %s %u32 %u32 %u32 %u32 %u32 %u32');
 
%% permet de nommer les différentes matrices
 
date=Scan{1,1};
heure=Scan{1,2};
Cond=Scan{1,3};
Temp1=Scan{1,4};
Temp2=Scan{1,5};
Turb=Scan{1,6};
 
%% permet d'avoir sous format numérique la date et l'heure en concaténant
%% les deux cellules date et heure
 
num={date heure};
num=[num{1,1} num{1,2}];
num=cell2mat(num);
dateheure=datenum([num(:,1:10) repmat(' ',length(num(:,1)),1) num(:,11:end)],'yyyy-mm-dd HH:MM:SS');
clear date;
clear heure;
clear num;

Mon code bug à deux endroits:

1) lorsque j’enlève les entêtes, le fichier 'dada.txt' n'est pas dan le même format que le fichier initial. c a d que le format d'origine est :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
"TOA5","CR800Series","CR800","17398","CR800.Std.21","CPU:Dattalogger1.CR8","48133","Table1"
"TIMESTAMP","RECORD","BattV","Cond","Ct","Temp","TurbNTU"
"TS","RN","Volts","mS/cm","mS/cm","Deg C","NTU"
"","","Smp","Smp","Smp","Smp","Smp"
"2011-07-19 14:46:00",0,12.39,0.082,0.04675161,7.049,16.96
"2011-07-19 14:48:00",1,12.39,0.082,0.04684953,7.019,16.96
"2011-07-19 14:50:00",2,12.4,0.082,0.04697675,7.087,16.96
"2011-07-19 14:52:00",3,12.4,0.082,0.04685926,7.047,16.96
"2011-07-19 14:54:00",4,12.4,0.082,0.046918,7.047,16.5

mais ensuite le fichier réécrit n'a plus d'entête comme prevu mais toute les ligne sont attachées...

2) dans un second temps, lorsque j'utilise la fonction textscan, les matrices Temp1 Temp2 et Turb ne contiennent pas les bonnes valeurs.

La taille de ce fichier initial est d'environs 10Mo.....

Toute aide est la bienvenue!!!

Merci

Invité · 07/12/2011, 15h05

Bonjour,

Attention de bien refermer ton fichier après FREAD au début et lors de tes remplacement:
Tu peux réunir tous tes remplacements en un seul

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
fid=fopen(svt,'r');
N=4;
for n=1:N;
    fgetl(fid);
end
X=fread(fid);
fclose(fid);
X=strrep(X,'"','');
X=strrep(X,' ',',');
X=strrep(X,',',' ');
fid=fopen('dada.txt','w');
fwrite(fid,X);
fclose(fid);

Ensuite pourquoi ne pas utiliser toute la puissance de la fonction TEXTSCAN sur ton fichier d'origine? Elle t'aiderait même à faire la concaténation de l'heure et la date que tu voulais faire dans l'autre discussion:

Autre chose: le format u32 représente des entiers, or ici ton fichier contient des nombres à virgule. À toi de voir ce que tu veux réellement lire.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
fid=fopen(svt,'rt');
Scan=textscan(fid,'"%19c" %n %n %n %n %n %n','delimiter',',','Headerlines',4,'CollectOutput',true);
fclose(fid);

**Jerome Briot** · 07/12/2011, 15h21

Le format "%19c" peut être remplacé par %q

**mamour71** · 07/12/2011, 16h42

Merci beaucoup pour vos réponses.

Cela marche super. Et en plus en allégeant mon code.

Encore merci de votre présence.

**mamour71** · 07/12/2011, 16h58

Par contre le code

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
fid=fopen(svt,'rt');
Scan=textscan(fid,'"%19c" %n %n %n %n %n %n','delimiter',',','Headerlines',4,'CollectOutput',true);
fclose(fid);

ne s'applique pas à mes données puisque je ne retrouve que 47 lignes de données sur plus de 77000.. Et je pense que cela viens du fait qu'il y a des NaN et des chiffres négatifs...

mais merci quand même

Invité · 07/12/2011, 17h08

Cela ne devrait pas poser de problème

Pourrait-on avoir un aperçu des lignes aux alentours de là où TEXTSCAN s'arrête?

**mamour71** · 07/12/2011, 17h41

Pas de problème.
Au niveau des NaN du texte suivant:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
"2011-07-19 16:10:00",42,12.4,0.086,0.04872196,6.811,12.86
"2011-07-19 16:12:00",43,12.4,0.086,0.04871212,6.821,13.31
"2011-07-19 16:14:00",44,12.4,0.086,0.04876117,6.83,14.68
"2011-07-19 16:16:00",45,12.4,0.005,0.04890845,-98.9,12.86
"2011-07-19 16:18:00",46,12.4,"NAN","NAN",-273.2,12.86
"2011-07-19 16:20:00",47,12.4,0.087,0.04890845,6.83,13.08

(Ceci est une partie du fichier brut)...