Problème récupération de données depuis un fichier .txt

Bonjour tout le monde !

Dans le cadre de mon stage, je dois piloter et récupérer les données d'un appareil de mesure (mesure de la conductivité électrique) via Python. J'arrive à communiquer et piloter l'appareil via Ethernet sans problème, néanmoins lors de la récupération des données j'obtiens une liste (que j'enregistre dans un fichier .txt) sous cette forme :
Pièce jointe 620521

Mon problème est le suivant : j'aimerais réaliser un tableau via pandas afin de le mettre dans un fichier excel. Afin de réaliser ce tableau, je dois extraire 2 listes (tension et intensité) du fichier .txt ci-dessus. Or je ne peux exploiter mes données tels quels puisque ma liste ne contient qu'une ligne. De plus dans cette liste, les données en position "impaire" correspondent à l'intensité et les données en position "paire" correspondent à la tensions :
Pièce jointe 620523

Je ne sais pas si il existe une fonction capable de récupérer les données d'une liste en fonction de la position des données (peut-être avec une boucle). Auriez_vous une idée ou une proposition pour régler mon problème ?

AdriMine.

Citation:

---

Envoyé par AdriMine

Auriez_vous une idée ou une proposition pour régler mon problème ?

---

Si vous voulez utilisez pandas, prenez le temps de comprendre comment ça fonctionne.

Si c'est trop compliqué, lire un fichier texte, en extraire les données qu'on veut de chaque ligne pour en faire un tableau à 2 dimensions et en faire un fichier CSV ou Excel sera peut être plus facile.

Mais au bout du bout, c'est vous qui programmez...

- W

D'accord avec wiztricks
Panda, c'est super mais c'est de la grosse machinerie.
le module csv fait déjà pas mal de trucs tout en restant trivial

ici un lien qui montre des exemples avec les deux.
https://pythonguides.com/python-write-a-list-to-csv/

Citation:

---

Envoyé par AdriMine

Bonjour tout le monde !

Je ne sais pas si il existe une fonction capable de récupérer les données d'une liste en fonction de la position des données (peut-être avec une boucle). Auriez_vous une idée ou une proposition pour régler mon problème ?

---

je ne comprends pas la question. C'est natif, avec les listes.

Code:

---

1 2 3 4 5 6

liste = [1,2,3,4] print(liste[2])   liste = [[1,2,3,4], [5,6,7,8], [9,10,11,12]] print(liste[1][2])

---

Bonjour

Citation:

---

Envoyé par AdriMine

Je ne sais pas si il existe une fonction capable de récupérer les données d'une liste en fonction de la position des données (peut-être avec une boucle).

---

Ben oui. C'est quand-même un petit peu la base des listes que de pouvoir extraire telle donnée en fonction de sa position. C'est ce qu'on appelle "l'index".
Si "L" est une liste, alors L[0] c'est le premier élément, L[1] c'est le second, L[2] le 3° et etc. C'est écrit dans tous les tutos Python pour débutant. 8O

Citation:

---

Envoyé par AdriMine

De plus dans cette liste, les données en position "impaire" correspondent à l'intensité et les données en position "paire" correspondent à la tensions

---

Code:

---

1 2	intensite=L[0::2] tension=L[1::2]

---

Ca c'est le slicing (extraction d'une sous-liste là aussi par position sauf que les positions sont exprimées sous forme debut:fin:increment).

Citation:

---

Envoyé par Sve@r

Code:

---

1 2	intensite=L[0::2] tension=L[1::2]

---

Ca c'est le slicing (extraction d'une sous-liste là aussi par position sauf que les positions sont exprimées sous forme debut:fin:increment).

---

Ah yes, je n'y aurais pas pensé ! C'est sûrement la méthode la plus rapide !

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17

>>> L = [random.random() for _ in range(100000000)]   >>> def t1(): st = time.time() t = L[0::2] print(time.time()-st)   >>> def t2(): st = time.time() t = [l for i, l in enumerate(L) if i % 2 == 0] print(time.time()-st)   >>> t1() 0.4607667922973633   >>> t2() 5.627790212631226

---

Citation:

---

Envoyé par LeNarvalo

Code:

---

1 2 3 4

>>> def t2(): st = time.time() t = [l for i, l in enumerate(L) if i % 2 == 0] print(time.time()-st)

---

---

Sans déconner !!! Il doit y avoir au-moins un milliard de méthodes 10 fois plus rapide que celle-ci qui génère une énumération (une énumération c'est quand-même deux listes parallèles !!!) pour isoler les éléments pairs 8O
Ce n'est pas parce que tu essayes des trucs qu'il faut essayer le pire des trucs parce que un tel test n'a aucun sens (personne n'irai écrire ça). Tu aurais pu par exemple utiliser range(0, len(L), 2) qui est une possibilité plus crédible...

Citation:

---

Envoyé par Sve@r

Tu aurais pu par exemple utiliser range(0, len(L), 2) qui est une possibilité plus crédible...

---

Oh tu sais moi j'écris des trucs plus improbables que ça encore, je dirais même plus, dans ma tête ça paraît assez logique !

Code:

---

1 2 3 4 5 6 7 8

>>> def t4(): st = time.time() t = [L[i] for i in range(0,len(L),2)] print(time.time()-st)     >>> t4() 2.405531644821167

---

2x plus rapide effectivement que l'énumération, sans surprise du coup ^^

Citation:

---

Envoyé par LeNarvalo

je dirais même plus, dans ma tête ça paraît assez logique !

---

Ah ton code était parfaitement logique, sur ça on ne peut rien dire. Mais pour une liste de 20 éléments tu en génères 40 et tu n'en gardes que 10
Ce qu'il faut c'est à chaque fois que tu pars dans des trucs un poil complexes (exemple listes en intension en plus avec test) se dire "n'y a-t-il pas un truc plus efficace" ? Et si tu peux trouver une librairie qui fait le job (numpy, panda, sqlite) c'est encore mieux (les librairies sont écrites en C donc ultra rapides).

bonjour

Citation:

---

Envoyé par AdriMine

j'obtiens une liste (que j'enregistre dans un fichier .txt) sous cette forme :

---

Au lieu de vouloir convertir le fichier texte (non exploitable ?), il serait plus judicieux de l'enregistrer directement en .csv ? je suppose que l'api à ton appareil de mesure ne renvoie pas directement un tableau ?

Bonjour à tous, et merci pour vos très nombreuses réponses et remarques.

Pour info, j'ai réussi à m'en sortir avec cette histoire de liste avec les positions pairs et impaires grâce à une boucle while :

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13

donnees_recus = self.K6221.query_ascii_values("TRAC:DATA?") """Liste reçus par l'appareil""" x = [] y = [] z=0 l= len(donnees_recus) while z < l: if z % 2==0: x.append(donnees_recus[z]) z = z+1 else: y.append(donnees_recus[z]) z = z+1

---

Cette boucle fonctionne et ça me convient parfaitement ! En fait ce que je cherchais (et ce que je voulais savoir :D) si une bibliothèque (comme pandas ou autre) avait une fonction qui m'aurait permis de le faire de manière "automatique" si je puis dire. Et j'étais aussi au courant que les balises dans les listes renvoyées une donnée par rapport à la position de cette dernière dans la liste.

Citation:

---

Envoyé par papajoker

Au lieu de vouloir convertir le fichier texte (non exploitable ?), il serait plus judicieux de l'enregistrer directement en .csv ? je suppose que l'api à ton appareil de mesure ne renvoie pas directement un tableau ?

---

Sur cette partie là, j'ai fait différemment ! La liste que je recevais de l'appareil (K6621) n'avait pas besoin d'être enregistré dans un fichier temporaire en .txt pour après le réutiliser (dans le programme existant en Python 2, on devait rouvrir ce fichier avec Numpy pour le traiter par la suite). Ce que j'ai fait, j'ai tout simplement enregistré ma liste dans la variable donnees_recus afin de l'exploiter directement.

Je dois avoué que je n'avais pas touché à Python depuis au moins 1 an et que j'ai un peu mal révisé certaines parties :? puisque je me suis redirigée dans l'automatisme industriel.

En tout cas je vous remercie beaucoup pour vos nombreuses réponses !

Citation:

---

Envoyé par AdriMine

La liste que je recevais de l'appareil (K6621) n'avait pas besoin d'être enregistré dans un fichier temporaire en .txt pour après le réutiliser

---

Si votre fichier texte était sous la forme de lignes contenant une mesure (tension et intensité), vous pourriez plus facilement l'exploiter avec pandas (sans avoir à découper une liste).

- W

Citation:

---

Envoyé par AdriMine

Cette boucle fonctionne et ça me convient parfaitement !

---

Pas à moi. Quand je vois écrit...

Code:

---

1 2 3 4 5 6

if truc: actionX actionZ else: actionY actionZ

---

.. .ça me hérisse littéralement. Comment peut-on dire "ça me convient" avec cette répétition absolument inutile d'instruction, franchement ???

Citation:

---

Envoyé par AdriMine

Code:

---

1 2 3 4 5 6 7 8 9 10 11

x = [] y = [] z=0 l= len(donnees_recus) while z < l: if z % 2==0: x.append(donnees_recus[z]) z = z+1 else: y.append(donnees_recus[z]) z = z+1

---

---

Code:

---

1 2	x=donnees_recus[0::2] y=donnees_recus[1::2]

---

Et ça il me semblait l'avoir déjà écrit...

Étonnamment (pour moi) while z < l: n'est pas moins performant que while z != l:, de façon notable du moins.

C'est pas trop mal sa proposition tout de même, 13x moins rapide que le slicing et 2.5x moins que la compréhesion de liste mais bon faut voir combien de données il y a à traiter.