Discussion :

[greg-gwened]

Bonjour,

Je souhaite importer des données depuis un fichier CSV vers une base postgre.
Des caractères speciaux nuisent au bon fonctionnement du programme (ici un simple cote ')

Comment puis-je y remedier? (supression du caractere ou remplacement par un espace)

Voici mon code d'extraction des données pour établir une requete d'insertion dans la base:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
def convert():
   f.next()
   for line in f:
 
         cur = connection.cursor()
         dp = line.split('	')  
         req ="INSERT INTO Geonames VALUES ("+dp[11] + ",'" + dp[0] + "','" + dp[1] + "'," + dp[2] + ",'" + dp[3] + "','" + dp[4] + "','" + dp[5] + "'," + dp[6] + "," + dp[7] + ",'" + dp[8] + "','" + dp[9] + "','" + dp[10] + "')"
         cur.execute(req)
         connection.commit()

Voici l'erreur:
Traceback (most recent call last):
File "./copy_name.py", line 34, in <module>
convert()
File "./copy_name.py", line 31, in convert
cur.execute(req)
psycopg2.ProgrammingError: erreur de syntaxe sur ou près de « s »
LINE 2: ...G','ATG',28,'AC','Antigua et Barbuda','Saint John's',443.0,6...

[greg-gwened]

Désolé pour le dérangement, j'ai trouvé la solution:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
def convert():
   f.next()
   for line in f:
 
         cur = connection.cursor()
         dp = line.split('	')
         dp[4]=dp[4].replace(",", "_")
         dp[5]=dp[5].replace(",", "_")
         dp[4]=dp[4].replace("'", "_")
         dp[5]=dp[5].replace("'", "_")
         req ="INSERT INTO Geonames VALUES ("+dp[11] + ",'" + dp[0] + "','" + dp[1] + "'," + dp[2] + ",'" + dp[3] + "','" + dp[4] + "','" + dp[5] + "'," + dp[6] + "," + dp[7] + ",'" + dp[8] + "','" + dp[9] + "','" + dp[10] + "')"
         cur.execute(req)
         connection.commit()

[dividee]

Au lieu de construire la chaîne SQL sous forme d'un string, il vaut mieux utiliser la substitution de paramètre, c'est à dire placer des marqueurs dans la chaîne SQL et passer un second paramètre à cursor.execute qui contient les valeurs à remplacer dans la chaîne. Normalement, le module se charge alors des conversions nécessaires.

La syntaxe précise dépend du style de paramètres utilisé par psycopg2. Je pense qu'il utilise le format suivant: les éléments à remplacer sont notés "%(name)s" et le second paramètre passé à execute est un dictionnaire qui doit contenir une clé "name".
Par exemple (code non testé):

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
sql = "INSERT INTO table VALUES(%(id)s, %(name)s)"
cur.execute(sql, { "id": 1, "name" : "toto" } )