Dataframe : Keyerror mais variable existante

Bonjour à tous,

Je suis actuellement en train de tester le basculement d'un code que j'ai sous SAS sur Python.
Pour cela, je travaille beaucoup avec des Dataframes.

Sur l'un de mes dataframes, j'aimerais créer un index sur deux variables 'HHID' et 'TITID'.

Code:

---

df.set_index(['HHID', 'TITID'], drop=True, append=False, inplace=True, verify_integrity=False)

---

mais j'ai l'erreur suivante :

Code:

---

KeyError: 'HHID'

---

Ce que je ne comprends pas car si je fais un export en csv de mon dataframe 'df' juste avant mon set_index, j'obtiens la sortie suivante :

Code:

---

1 2 3 4

HHID,TITID,Var1,Var2 48852293,101,1,60 48852293,109,4,284 [...]

---

et donc avec ma variable présente dans le dataframe

J'ai le même souci avec 'TITID' si je supprime 'HHID' de l'index...

Quelqu'un peut-il m'aider?

Merci d'avance!

Petite avancée : en tapant :

Code:

---

print(df.keys())

---

J'obtiens :

Code:

---

1 2	Index([u'Var1', u'Var2'], dtype='object')

---

Malgré la présence des variables HHID et TTID dans mon fichier, python ne les trouve pas

J'ai oublié de préciser dans mon premier post que j'apprends Python en autodidacte, donc un peu d'indulgence pour mes questions qui peuvent paraître noobesques! ;)

Salut,

Qu'est-ce que "df" ?

Si c'est une instance de classe, tu peux montrer le code de cette classe ? Ça faciliterait les choses.

df est mon dataframe créé de la façon suivante :

Code:

---

df=df2.groupby(['HHID', 'TITID']).agg({'Var1': np.sum, 'Var2': np.size})

---

où df2 est un autre dataframe contenant HHID, TITID, Var1 et Var2
En sortie de ce code, j'obtiens df, avec, pour un HHID et un TITID, Var1 = somme des Var1 de df2, et Var2, le nombre de Var2.

J'espère avoir été claire

J'en avais peur.

C'est quoi ce dataframe ? Du code ?

Bonjour,

Est-ce que c'est le dataframe de pandas? (http://pandas.pydata.org/pandas-docs...DataFrame.html)

Oui, c'est le dataframe de pandas.

mon df2 ressemble à ça :
HHID TITID VAR1 VAR2
123 101 12 1
123 101 25 2
123 102 50 6

et df me sort :

HHID TITID VAR1 VAR2
123 101 37 2
123 102 50 1
(pour rappel, somme sur VAR1 et count sur VAR2)

C'est quand je fais un export de ce dataframe df que j'ai bien toutes mes variables, mais lorsque je fais

Code:

---

df.keys()

---

, il ne trouve que VAR1 et VAR2

Code:

---

Index([u'Var1', u'Var2'], dtype='object')

---

Bonjour,

Désolé, je ne connais pas assez pandas pour t'aider, mais pandas a une doc: es-tu sûr d'avoir bien compris ce que fait la méthode keys()?

http://pandas.pydata.org/pandas-docs...rame.keys.html

Bonjour tyrtamos,

Merci pour le lien, mais je pense que j'utilisais dataframe.keys() correctement, car je voulais que ça me retourne la liste des colonnes de mon dataframe.
Pour être sûre que mon résultat soit correct, j'ai fait la même chose en remplaçant ".keys()" par "columns" et j'obtiens le même résultat :

Code:

---

Index([u'Var1', u'Var2'], dtype='object')

---

Malgré la présence de mes variables, python ne retrouve pas HHID et TITID.

Est-ce que cela pourrait être dû à :

Code:

---

df=df2.groupby(['HHID', 'TITID']).agg({'Var1': np.sum, 'Var2': np.size})

---

et par le fait que le groupby donne un "statut" spécial à mes variables HHID et TITID, de sorte que celles-ci ne soient plus retrouvées?

Merci à ceux qui m'aident et qui m'aideront! ;)

up

Salut,

Citation:

---

Envoyé par meuah

up

---

Pandas est une des nombreuses bibliothèques scientifique accessible depuis Python. Pour vous aider, il faudrait qu'un des lecteurs du forum pratique cette bibliothèque assez bien et que vous montriez un peu plus de code pour comprendre ce que vous cherchez à faire.
note: imaginez qu'on s'amuse à installer Pandas juste pour voir, un code qui permette à partir de là de reproduire ce que vous constatez est un minimum.

- W

Je pensais avoir été claire car je n'ai que qq lignes de code, alors je reprends.
J'ai une table en entrée, issue d'un dataframe que j'ai exporté.
Je réimporte ce fichier data_ttt.csv (issu d'un autre programme), que je place dans le dataframe pandas df2.
Sur ce dataframe, je fais un calcul, qui somme ma variable Var1, et compte ma variable Var2, en faisant un groupby sur mes variables HHID et TITID, et place le résultat dans un dataframe nommé df
et je veux ensuite créer un index sur ce nouveau dataframe df

Code:

---

1 2 3 4 5 6

import pandas as pd import numpy as np   df2= pd.read_csv("data_ttt.csv",sep=",") df=df2.groupby(['HHID', 'TITID']).agg({'Var1': np.sum, 'Var2': np.size}) df.set_index(['HHID', 'TITID'], drop=True, append=False, inplace=True, verify_integrity=False)

---

c'est là que j'obtiens :

Code:

---

1 2 3 4 5 6

7 df=df2.groupby(['HHID', 'TITID']).agg({'Var1': np.sum, 'Var2': np.size}) 8 df.to_csv("sortie_groupby.csv", sep=",", header=True) ----> 9 df.set_index(['HHID', 'TITID'], drop=True, append=False, inplace=True, verify_integrity=False)   KeyError: 'HHID'

---

Voici un extrait de mon jeu de données, présent dans data_ttt.csv :

Code:

---

1 2 3 4 5 6 7 8

,HHID,TITID,Var1,Var2 0,54459061,102,31,3 1,54459061,140,31,3 2,54459061,140,30,3 3,54459061,102,81,1 4,54459061,102,20,1 5,54459061,140,46,1 6,54459061,140,39,1

---

Et voici ce que j'obtiens lorsque j'exporte df, avant la création de l'index :

Code:

---

1 2 3

df=df2.groupby(['HHID', 'TITID']).agg({'Var1': np.sum, 'Var2': np.size}) df.to_csv("sortie_groupby.csv", sep=",", header=True) ##### ICI df.set_index(['HHID', 'TITID'], drop=True, append=False, inplace=True, verify_integrity=False)

---

Résultat de l'export

Code:

---

1 2 3

HHID,TITID,Var1,Var2 54459061,102,132,3 54459061,140,146,4

---

Pourquoi ne reconnaît-il pas mon HHID (et mon TITID) alors que ces données sont bien présentes lors de l'export...?