it-swarm.com.ru

Почему Python не может проанализировать эти данные JSON?

У меня есть этот JSON в файле:

{
    "maps": [
        {
            "id": "blabla",
            "iscategorical": "0"
        },
        {
            "id": "blabla",
            "iscategorical": "0"
        }
    ],
    "masks": [
        "id": "valore"
    ],
    "om_points": "value",
    "parameters": [
        "id": "valore"
    ]
}

Я написал этот скрипт для печати всех данных JSON:

import json
from pprint import pprint

with open('data.json') as f:
    data = json.load(f)

pprint(data)

Эта программа вызывает исключение, хотя:

Traceback (most recent call last):
  File "<pyshell#1>", line 5, in <module>
    data = json.load(f)
  File "/usr/lib/python3.5/json/__init__.py", line 319, in loads
    return _default_decoder.decode(s)
  File "/usr/lib/python3.5/json/decoder.py", line 339, in decode
    obj, end = self.raw_decode(s, idx=_w(s, 0).end())
  File "/usr/lib/python3.5/json/decoder.py", line 355, in raw_decode
    obj, end = self.scan_once(s, idx)
json.decoder.JSONDecodeError: Expecting ',' delimiter: line 13 column 13 (char 213)

Как я могу проанализировать JSON и извлечь его значения?

1365
michele

Ваши данные неверны JSON формат. У вас есть [], когда вы должны иметь {}:

  • [] для массивов JSON, которые называются list в Python
  • {} для объектов JSON, которые называются dict в Python

Вот как должен выглядеть ваш JSON-файл:

{
    "maps": [
        {
            "id": "blabla",
            "iscategorical": "0"
        },
        {
            "id": "blabla",
            "iscategorical": "0"
        }
    ],
    "masks": {
        "id": "valore"
    },
    "om_points": "value",
    "parameters": {
        "id": "valore"
    }
}

Тогда вы можете использовать свой код:

import json
from pprint import pprint

with open('data.json') as f:
    data = json.load(f)

pprint(data)

С данными теперь вы также можете найти такие значения:

data["maps"][0]["id"]
data["masks"]["id"]
data["om_points"]

Попробуйте это и посмотрите, начнет ли это иметь смысл.

2047
Justin Peel

Ваш data.json должен выглядеть так:

{
 "maps":[
         {"id":"blabla","iscategorical":"0"},
         {"id":"blabla","iscategorical":"0"}
        ],
"masks":
         {"id":"valore"},
"om_points":"value",
"parameters":
         {"id":"valore"}
}

Ваш код должен быть:

import json
from pprint import pprint

with open('data.json') as data_file:    
    data = json.load(data_file)
pprint(data)

Обратите внимание, что это работает только в Python 2.6 и более поздних версиях, поскольку это зависит от оператора with- . В Python 2.5 используйте from __future__ import with_statement, в Python <= 2.4 см. ответ Джастина Пила , на котором основан этот ответ.

Теперь вы также можете получить доступ к отдельным значениям, например так:

data["maps"][0]["id"]  # will return 'blabla'
data["masks"]["id"]    # will return 'valore'
data["om_points"]      # will return 'value'
301
Bengt

ответ Джастина Пила действительно полезно, но если вы используете Python 3, чтение JSON должно выполняться следующим образом:

with open('data.json', encoding='utf-8') as data_file:
    data = json.loads(data_file.read())

Примечание: используйте json.loads вместо json.load. В Python 3 json.loads принимает строковый параметр. json.load принимает файловый параметр объекта. data_file.read() возвращает строковый объект.

Честно говоря, я не думаю, что в большинстве случаев проблема заключается в загрузке всех данных JSON в память.

64
Geng Jiawen
data = []
with codecs.open('d:\output.txt','rU','utf-8') as f:
    for line in f:
       data.append(json.loads(line))
52
user1743724

"Ultra JSON" или просто "ujson" могут обрабатывать наличие [] во входном файле JSON. Если вы читаете входной файл JSON в вашу программу в виде списка элементов JSON; например, [{[{}]}, {}, [], etc...] ujson может обрабатывать произвольный порядок списков словарей, словари списков.

Вы можете найти ujson в индекс пакета Python , и API почти идентичен встроенной библиотеке Python json.

ujson также намного быстрее, если вы загружаете большие файлы JSON. Вы можете увидеть детали производительности в сравнении с другими библиотеками Python JSON по той же ссылке.

13
moeabdol

Если вы используете Python3, вы можете попробовать изменить JSON-файл (connection.json) на:

{
  "connection1": {
    "DSN": "con1",
    "UID": "abc",
    "PWD": "1234",
    "connection_string_python":"test1"
  }
  ,
  "connection2": {
    "DSN": "con2",
    "UID": "def",
    "PWD": "1234"
  }
}

Затем с помощью следующего кода:

connection_file = open('connection.json', 'r')
conn_string = json.load(connection_file)
conn_string['connection1']['connection_string_python'])
connection_file.close()
>>> test1
7
sushmit

Вот вам модифицированный файл data.json:

{
    "maps": [
        {
            "id": "blabla",
            "iscategorical": "0"
        },
        {
            "id": "blabla",
            "iscategorical": "0"
        }
    ],
    "masks": [{
        "id": "valore"
    }],
    "om_points": "value",
    "parameters": [{
        "id": "valore"
    }]
}

Вы можете позвонить или распечатать данные на консоли, используя следующие строки:

import json
from pprint import pprint
with open('data.json') as data_file:
    data_item = json.load(data_file)
pprint(data_item)

Ожидаемый вывод для print(data_item['parameters'][0]['id']):

{'maps': [{'id': 'blabla', 'iscategorical': '0'},
          {'id': 'blabla', 'iscategorical': '0'}],
 'masks': [{'id': 'valore'}],
 'om_points': 'value',
 'parameters': [{'id': 'valore'}]}

Ожидаемый вывод для print(data_item['parameters'][0]['id']):

valore
6
JoboFive

Как пользователь python3 ,

Разница между методами load и loads особенно важна, когда вы читаете данные json из файла.

Как указано в документах:

json.load:

Десериализовать fp (поддерживающий .read () текстовый файл или двоичный файл, содержащий документ JSON) в объект Python, используя эту таблицу преобразования.

json.loads:

json.loads: десериализовать s (экземпляр str, bytes или bytearray, содержащий документ JSON) в объект Python, используя эту таблицу преобразования.

метод json.load может непосредственно читать открытый документ json, так как он способен читать двоичный файл.

with open('./recipes.json') as data:
  all_recipes = json.load(data)

В результате ваши данные JSON доступны в формате, указанном в соответствии с таблицей преобразования:

https://docs.python.org/3.7/library/json.html#json-to-py-table

4
muratgozel

Есть два типа в этом разборе.

  1. Разбор данных из файла по системному пути
  2. Парсинг JSON с удаленного URL.

Из файла вы можете использовать следующее

import json
json = json.loads(open('/path/to/file.json').read())
value = json['key']
print json['value']

В этой статье объясняется полный анализ и получение значений с использованием двух сценариев . Анализ JSON с использованием Python

4
Bibin Wilson