Discussion :

[geeka]

Bonjour,

J'ai suivi le tutoriel, pour parcourir un fichier JSON simple ça marche bien, mais je souhaite parcourir un autre fichier et là j'ai des erreurs.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
 
# Mon programme en Python
## 1) Ouverture fichier JSON
fichier_json = open('Wiktionnaire_francais_FINAL/json_noms/donnees_anglais_1.json', 'r') # Attention c'est dans le répertoire Python ! 
 
#2) Lire le JSON sous Python
import json
with fichier_json as fichier:
	data = json.load(fichier)
	print(data["cmcontinue"])

Sachant que mon fichier JSON est sous cette forme :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
 
{"batchcomplete":"","continue":{"cmcontinue":"page|41424f5244455552|137363","continue":"-||extracts"},"query":
{"categorymembers":[{"ns":100,"title":"Annexe:Substantifs en français"},
{"ns":0,"title":"0-day"},{"ns":0,"title":"06"},
{"ns":0,"title":"1,2-dichloropropane"},
{"ns":0,"title":"1,3-dichloropropène"},
{"ns":0,"title":"1-alpha,2-alpha,3-bêta,4-alpha,5-alpha,6-bêta-hexachlorocyclohexane"},{.......

Les erreurs :

Traceback (most recent call last):
File "<pyshell#144>", line 2, in <module>
data = json.load(fichier)
File "C:\Users\user\AppData\Local\Programs\Python\Python35-32\lib\json\__init__.py", line 268, in load
parse_constant=parse_constant, object_pairs_hook=object_pairs_hook, **kw)
File "C:\Users\user\AppData\Local\Programs\Python\Python35-32\lib\json\__init__.py", line 319, in loads
return _default_decoder.decode(s)
File "C:\Users\user\AppData\Local\Programs\Python\Python35-32\lib\json\decoder.py", line 342, in decode
raise JSONDecodeError("Extra data", s, end)
json.decoder.JSONDecodeError: Extra data: line 1 column 14010 (char 14009)


Merci

[wiztricks]

Salut,

Il faut que vous regardiez dans le fichier pour savoir pourquoi json.load râle.
Le fait est que cette bibliothèque ne sait pas décoder une suite d'objets:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
>>> import json
>>> json.loads('{}')
{}
>>> json.loads('{}{}')
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "C:\py_env\py34-64\lib\json\__init__.py", line 318, in loads
    return _default_decoder.decode(s)
  File "C:\py_env\py34-64\lib\json\decoder.py", line 346, in decode
    raise ValueError(errmsg("Extra data", s, end, len(s)))
ValueError: Extra data: line 1 column 3 - line 1 column 5 (char 2 - 4)
>>>

alors que:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
>>> json.loads('[{},{}]')
[{}, {}]
>>>

'[{},{}]' est un seul objet composé de... alors que '{}{}' est la concaténation de 2 objets.

- W

[geeka]

Merci pour votre réponse.
Le fichier JSON est un peu complexe, il a cette syntaxe :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

{ {...},  { [.............] } }, { {...},  { [.............] } }

si j'utilise json.loads j'ai également une erreur.
Est-ce que je peux lire u json avec cette forme ?

[wiztricks]

Salut,

S'il est de cette forme:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

{ {...},  { [.............] } }, { {...},  { [.............] } }

alors il ressemble plutôt à:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

'{},{}'

vous pourriez voir ce que çà donne en ajoutant un '[' au début et un ']' à la fin.
Mais c'est du bricolage... les options sont:
- générer un fichier plus propre,
- séparer les "records" JSON avant de les soumettre à json.load

W

[geeka]

J'ai ajouté des crochets, ça m'a donné un autre liste d'erreurs :
Traceback (most recent call last):
File "C:\Program Files (x86)\EasyPHP-12.1\www\my portable files\mon_programme_v0_ouverture_fichier.py", line 8, in <module>
data = json.load(fichier)
File "C:\Users\user\AppData\Local\Programs\Python\Python35-32\lib\json\__init__.py", line 268, in load
parse_constant=parse_constant, object_pairs_hook=object_pairs_hook, **kw)
File "C:\Users\user\AppData\Local\Programs\Python\Python35-32\lib\json\__init__.py", line 319, in loads
return _default_decoder.decode(s)
File "C:\Users\user\AppData\Local\Programs\Python\Python35-32\lib\json\decoder.py", line 339, in decode
obj, end = self.raw_decode(s, idx=_w(s, 0).end())
File "C:\Users\user\AppData\Local\Programs\Python\Python35-32\lib\json\decoder.py", line 355, in raw_decode
obj, end = self.scan_once(s, idx)
json.decoder.JSONDecodeError: Expecting ',' delimiter: line 2 column 14010 (char 14011)


Comment je peux nettoyer le JSON. C'est un grand fichier ?
En fait, j'ai obtenu ce fichier à partir d'une API qui donne justement le format JSON, pourquoi n'est-il pas bon ?

Merci

[wiztricks]

Salut,

Comment je peux nettoyer le JSON. C'est un grand fichier ?
En fait, j'ai obtenu ce fichier à partir d'une API qui donne justement le format JSON, pourquoi n'est-il pas bon ?

Pour l'instant, la seule chose que vous savez c'est que çà génère des trucs (une "suite d'objets json") de la forme "{} {}" et non "{}, {}" comme vous le mentionniez dans votre post précédent
*et* que la bibliothèque json de Python n'en veut pas (pas plus d'ailleurs que les validateurs json disponibles "on-line" - ce n'est qu'une information, çà ne veut pas dire que ce sont des constructions illicites).

Est-ce que vous utilisez "correctement" votre API? N'y-a-t-il pas des possibilités pour rendre le JSON produit plus comestible par la bibliothèque Python?

S'il faut remettre "en forme", il faut déjà s'assurer qu'on ne va rencontrer que la forme "{} {}" et non pas d'autres bizarreries genre: "[{}, {}] {}". A partir de là ce ne sont que des chaînes de caractères, compter les paires de "{", "}" avec une boucle "for" est un exercice que vous avez dans les tutos pour débutants (le faire avec le module re est à peine plus compliqué)... mais, il faut quand même s'assurer de la variabilité des patterns que vous allez devoir "mouliner" ne serait-ce que pour "tester" que çà fait bien ce que vous attendez sur des exemples "simples".

- W