Discussion :

[trapp]

Bonjour à tous,

tout d'abord,je débute en programmation.
Je suis sous Mint 17.1 , IDE Eclipse 4.4 , Python 3.4

Je cherche à concaténer 4 fichier csv de cette façon :

fichier1-1 fichier2-1
fichier1-2 fichier2-2

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
#!/usr/bin/python
 
flag4 = 0
fichierfinal = open('essais.txt', 'w')
for i in range (1,3):
    nomdefichier1 = "2013-04-02_JeteeEst"+str(i)+".csv"
    nomdefichier2 = "2013-04-02_JeteeNord"+str(i)+".csv"
    fichiersource1 = open(nomdefichier1,'r')
    fichiersource2 = open(nomdefichier2,'r')
    while flag4 < 2:
        txt = fichiersource1.read(1)
        if txt == chr(10): #si retour chariot
            txt = ";;"
            fichierfinal.write(txt)
            while 1:
                txt = fichiersource2.read(1)
                if txt == "":
                    flag4 = flag4 + 1
                    break
                if txt == chr(10):
                    fichierfinal.write(txt)
                    break
                else :
                    fichierfinal.write(txt)
        else :
            fichierfinal.write(txt)
fichiersource1.close()
fichiersource2.close()
fichierfinal.close()

conca.zip

Le fichier1-1 faite 737 lignes, le programme concatène comme je le veux mais s'emballe en arrêtant en milieu de ligne 707, le processus python prend 100% d'un CPU et se met à bouffer de la mémoire.
A l'endroit où il s'arrête, il n'y rien de particulier, pas de caractère spéciale, ce n'est que du chiffre ou point-virgule...

[wiztricks]

Salut,

Pour résumer, ce while là:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
    while flag4 < 2:
        txt = fichiersource1.read(1)
        if txt == chr(10): #si retour chariot
           ...
        else :
            fichierfinal.write(txt)

ne sort jamais car f.read(1) retourne la chaine vide lorsqu'on arrive à la fin du fichier mais cette condition n'est jamais testée.

Dans tous les cas, inutile d'ouvrir un fichier texte pour le lire caractère par caractère: un fichier texte étant un ensemble de lignes séparées par une fin de ligne. Python permet de lire toutes les lignes:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

lines = fichiersource1.read().splitlines()

ou ligne par ligne...


- W

[trapp]

Merci pour ta réponse,

Pour résumer, ce while là:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
    while flag4 < 2:
        txt = fichiersource1.read(1)
        if txt == chr(10): #si retour chariot
           ...
        else :
            fichierfinal.write(txt)

ne sort jamais car f.read(1) retourne la chaine vide lorsqu'on arrive à la fin du fichier mais cette condition n'est jamais testée.

Dans ce cas là, je rencontrerais le problème qui me préoccupe en fin de fichier1, or il n'arrive pas jusqu'à la fin (707éme ligne sur les 737 du fichier).

Dans tous les cas, inutile d'ouvrir un fichier texte pour le lire caractère par caractère: un fichier texte étant un ensemble de lignes séparées par une fin de ligne, on lit toutes les lignes:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

lines = fichiersource1.read().splitlines()

Je vais regardé cela, merci.
C'est un peu bourrin ce que j'ai fait, mais je voulais introduire "; ;" entre les 2 lignes concaténées.

[wiztricks]

Salut,

C'est un peu bourrin ce que j'ai fait, mais je voulais introduire "; ;" entre les 2 lignes concaténées.

Soient L1 et L2 représentant les lignes des fichiers 1&2:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
>>> L1 = list('abcde')
>>> L2 = list('12345')

Si on veut "intercaler" ';;' entre chaque ligne:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
>>> for z in zip(L1, L2):
...     print(';;'.join(z))
...
a;;1
b;;2
c;;3
d;;4
e;;5
>>>

Et vous voyez qu'on traite des listes de chaînes de caractères qui peuvent accessoirement avoir été remplies avec le contenu d'un fichier.

- W

[trapp]

Je n'arrive pas me servir de ce que tu me montres (surtout le splitlines malgré des recherches sur le sujet)
Mais cela m'a fait réfléchir surtout ta remarque sur le traitement par ligne.
Je pense avoir trouver une formule qui marche :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

txt = fichiersource1.readline()[0:-1]+";;"+fichiersource2.readline() # le -1 pour virer le retour à la ligne

Me reste à traiter les fins de fichier.

[wiztricks]

Je n'arrive pas me servir de ce que tu me montres (surtout le splitlines malgré des recherches sur le sujet).

dommage, car le tout s'écrirait en ces quelques lignes:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
TMPL = "2013-04-02_JeteeEst%d.csv", "2013-04-02_JeteeNord%d.csv"
with open('essais.txt', 'w') as ff:
    for x in range(1, 3):
        with open(TMPL[0] % x) as s1, open(TMPL[1] % x) as s2:
            for z in zip(s1.read().splitlines(), s2.read().splitlines()):
                print (';;'.join(z), file=ff)

- W