Discussion :

[haraigo]

Bonjour,

J'ai un fichier texte de ce type :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
450 : 12151
450 : 564561
650 : 565664
550 : 65656
650 : 4646
500 : 46646

Je voudrais faire la somme des valeurs pour des conditions identiques.
C'est-à-dire faire :
450 : 12151 + 564561
650 : 565664 + 4646
etc.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
somme = open('somme.txt', 'r')
somme = somme.read()
 
Array = np.genfromtxt(StringIO(somme), 'string', delimiter=' ')

J'ai converti mon fichier texte en Array.
Mais je vois pas trop quelle boucle utiliser pour la suite.
Si quelqu'un peut me mettre sur la piste...

Merci.

[plxpy]

Bonjour

pourquoi n'utilises-tu pas un dictionnaire dont les clés seraient tes "valeurs liens" et les valeurs, les sommes des deuxièmes nombres de chaque ligne, construites au fur et à mesure de la lecture des lignes ?

[ZZelle]

Je ne sais pas quel est le nombre de lignes du/des fichiers à parcourir mais ...
Il est souvent préférable de processer un fichier à la volée plutôt que de charger tout le fichier puis de le processer ; ça évite d'avoir des problèmes si le fichier d'entrée est gros :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
 
import collections
 
count_map = collections.Counter() # ou collections.defaultdict(lambda:0) 
# on utilise Counter/defaultdict(lambda:0) car qd la clé n'est pas trouvé dans count_map, il renvoie 0
 
with open('somme.txt') as file:
    # on processe les lignes du fichier au fil de la lecture
    for line in file: 
        # on parse la ligne, parse() à définir
        key, value = parse(line)
        # on met à jour le dictionnaire en conséquence
        count_map[key] += value
print dict(count_map)

[haraigo]

Je ne sais pas quel est le nombre de lignes du/des fichiers à parcourir mais ...
Il est souvent préférable de processer un fichier à la volée plutôt que de charger tout le fichier puis de le processer ; ça évite d'avoir des problèmes si le fichier d'entrée est gros :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
 
import collections
 
count_map = collections.Counter() # ou collections.defaultdict(lambda:0) 
# on utilise Counter/defaultdict(lambda:0) car qd la clé n'est pas trouvé dans count_map, il renvoie 0
 
with open('somme.txt') as file:
    # on processe les lignes du fichier au fil de la lecture
    for line in file: 
        # on parse la ligne, parse() à définir
        key, value = parse(line)
        # on met à jour le dictionnaire en conséquence
        count_map[key] += value
print dict(count_map)

J'ai pas trop compris ce que c'était que parse...

[ZZelle]

J'ai pas trop compris ce que c'était que parse...

Ce qui reste à coder .

parse() prend en entrée une ligne et en extrait les 2 entiers:
par exemple parse('123 : 456\n') renvoie le tuplet d'entiers (123, 456)

[fred1599]

On pourrait pour un gros fichier utiliser mmap

Array = np.genfromtxt(StringIO(somme), 'string', delimiter=' ')

Je suis curieux de savoir sous quelle forme est renvoyé Array (en passant le minimum était de renvoyer le résultat)

Un conseil supplémentaire parmi les autres déjà présents, est d'analyser une ligne de votre fichier texte.

Pour ouvrir un fichier

+1 pour ZZelle, prenez les bonnes habitudes with open c'est le bien.

[haraigo]

Bon j'y arrive pas.
C'est trop compliqué pour un débutant comme moi...

[fred1599]

Pourtant ça reste simple (t'aurais pu montrer tes essais), on prend une ligne

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

line = "450 : 12151"

de là, faut supprimer le ":" avec split().

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

key, value = line.split(':')

Si tu remarques on se rend compte que pour faire ta somme tu auras besoin de nombres et non de chaîne de caractères, c'est à dire 12151 et non "12151".

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

value = int(value)

Ensuite on va créer un dictionnaire vide pour insérer notre key et notre value.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

dico = {}

On va créer une fonction avec comme arguments key et value pour modifier notre dictionnaire "dico".

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
def parse(key, value):
    if key not in dico:
        dico[key] = value # on ajoute la clé et la valeur dans le dictionnaire
    else:
        dico[key] += value # on fait la somme des 2 valeurs

J'ai pas testé, mais en suivant simplement les étapes par exemple avec ton interpréteur, tu devrais réussir ce genre de chose.

[ZZelle]

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
def parse(key, value):
    if key not in dico:
        dico[key] = value # on ajoute la clé et la valeur dans le dictionnaire
    else:
        dico[key] += value # on fait la somme des 2 valeurs

Attention le parse de fred1599 n'est pas le même que celui mentionné dans mon 1er message, celui-ci serait plutôt :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
 
def parse(line):
     key, value = line.split(':') # on splitte en 2
     key, value = int(key), int(value) # on convertit en entier
     return key, value # done !

[haraigo]

Merci pour vos réponses.
En voyant vos réponses effectivement c'est pas très compliqué.
Moi, j'étais parti dans des boucles ayant aucun sens.
J'ai du mal à traduire en langage en fait.

Sinon pour parse, j'avais vu le problème du coup j'ai enlevé la fonction et c'était nickel.

[fred1599]

Sinon pour parse, j'avais vu le problème du coup j'ai enlevé la fonction et c'était nickel.

J'ai pas compris, quel problème? enlevé la fonction?

[haraigo]

J'ai pas compris, quel problème? enlevé la fonction?

C'est pas vraiment un problème c'est juste que c'était pas le même parse que ZZelle. Du coup, j'ai juste mis ça directement dans le main, plutôt que de définir une fonction parse.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
if key not in dico:
        dico[key] = value # on ajoute la clé et la valeur dans le dictionnaire
    else:
        dico[key] += value # on fait la somme des 2 valeurs