Pourquoi Python ne peut pas analyser ces données JSON ?

Question

J'ai ce JSON dans un fichier :

{
    "maps": [
        {
            "id": "blabla",
            "iscategorical": "0"
        },
        {
            "id": "blabla",
            "iscategorical": "0"
        }
    ],
    "masks": [
        "id": "valore"
    ],
    "om_points": "value",
    "parameters": [
        "id": "valore"
    ]
}

J'ai écrit ce script pour imprimer toutes les données JSON :

import json
from pprint import pprint

with open('data.json') as f:
    data = json.load(f)

pprint(data)

Ce programme soulève cependant une exception :

Traceback (most recent call last):
  File "<pyshell#1>", line 5, in <module>
    data = json.load(f)
  File "/usr/lib/python3.5/json/__init__.py", line 319, in loads
    return _default_decoder.decode(s)
  File "/usr/lib/python3.5/json/decoder.py", line 339, in decode
    obj, end = self.raw_decode(s, idx=_w(s, 0).end())
  File "/usr/lib/python3.5/json/decoder.py", line 355, in raw_decode
    obj, end = self.scan_once(s, idx)
json.decoder.JSONDecodeError: Expecting ',' delimiter: line 13 column 13 (char 213)

Comment puis-je analyser le JSON et extraire ses valeurs ?

Answer 1

Vos données ne sont pas valides JSON format. Vous avez [] alors que vous auriez dû {} :

• [] sont pour les tableaux JSON, qui sont appelés list en Python
• {} sont pour les objets JSON, qui sont appelés dict en Python

Voici à quoi devrait ressembler votre fichier JSON :

{
    "maps": [
        {
            "id": "blabla",
            "iscategorical": "0"
        },
        {
            "id": "blabla",
            "iscategorical": "0"
        }
    ],
    "masks": {
        "id": "valore"
    },
    "om_points": "value",
    "parameters": {
        "id": "valore"
    }
}

Ensuite, vous pouvez utiliser votre code :

import json
from pprint import pprint

with open('data.json') as f:
    data = json.load(f)

pprint(data)

Avec les données, vous pouvez maintenant aussi trouver des valeurs comme ceci :

data["maps"][0]["id"]
data["masks"]["id"]
data["om_points"]

Essayez-les et voyez si cela commence à avoir du sens.

Answer 2

Su data.json devrait ressembler à ceci :

{
 "maps":[
         {"id":"blabla","iscategorical":"0"},
         {"id":"blabla","iscategorical":"0"}
        ],
"masks":
         {"id":"valore"},
"om_points":"value",
"parameters":
         {"id":"valore"}
}

Votre code devrait être :

import json
from pprint import pprint

with open('data.json') as data_file:    
    data = json.load(data_file)
pprint(data)

Notez que cela ne fonctionne qu'avec Python 2.6 et plus, car cela dépend de l'option with -Déclaration . En Python 2.5, utilisez from __future__ import with_statement dans Python <= 2.4, voir La réponse de Justin Peel sur lequel cette réponse est basée.

Vous pouvez maintenant aussi accéder à des valeurs uniques comme ceci :

data["maps"][0]["id"]  # will return 'blabla'
data["masks"]["id"]    # will return 'valore'
data["om_points"]      # will return 'value'

Answer 3

La réponse de Justin Peel est vraiment utile, mais si vous utilisez Python 3, la lecture de JSON doit se faire de la manière suivante :

with open('data.json', encoding='utf-8') as data_file:
    data = json.loads(data_file.read())

Note : utiliser json.loads au lieu de json.load . Dans Python 3, json.loads prend un paramètre de type chaîne de caractères. json.load prend un paramètre d'objet de type fichier. data_file.read() renvoie un objet de type chaîne de caractères.

Pour être honnête, je ne pense pas que ce soit un problème de charger toutes les données json en mémoire dans la plupart des cas. Je vois cela dans JS, Java, Kotlin, cpp, rust presque tous les langages que j'utilise. Considérer la question de la mémoire comme une blague pour moi :)

D'un autre côté, je ne pense pas que l'on puisse analyser un fichier json sans le lire en entier.

Answer 4

data = []
with codecs.open('d:\output.txt','rU','utf-8') as f:
    for line in f:
       data.append(json.loads(line))

Answer 5

"Ultra JSON" ou simplement "ujson" peut gérer le fait d'avoir [] dans votre fichier d'entrée JSON. Si vous lisez un fichier d'entrée JSON dans votre programme sous la forme d'une liste d'éléments JSON, par exemple, [{[{}]}, {}, [], etc...] ujson peut gérer n'importe quel ordre arbitraire de listes de dictionnaires, de dictionnaires de listes.

Vous pouvez trouver ujson dans le Index des paquets Python et l'API est presque identique à l'API intégrée de Python. json bibliothèque.

ujson est également beaucoup plus rapide si vous chargez des fichiers JSON plus volumineux. Vous pouvez voir les détails de la performance en comparaison avec d'autres bibliothèques Python JSON dans le même lien fourni.