Python json.loads показывает ValueError: Дополнительные данные

Ответ 1

Как вы можете видеть в следующем примере, json.loads (и json.load) не декодирует несколько объектов json.

>>> json.loads('{}')
{}
>>> json.loads('{}{}') # == json.loads(json.dumps({}) + json.dumps({}))
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "C:\Python27\lib\json\__init__.py", line 338, in loads
    return _default_decoder.decode(s)
  File "C:\Python27\lib\json\decoder.py", line 368, in decode
    raise ValueError(errmsg("Extra data", s, end, len(s)))
ValueError: Extra data: line 1 column 3 - line 1 column 5 (char 2 - 4)

Если вы хотите сбросить несколько словарей, оберните их в список, дамп списка (вместо многоязычных словарей несколько раз)

>>> dict1 = {}
>>> dict2 = {}
>>> json.dumps([dict1, dict2])
'[{}, {}]'
>>> json.loads(json.dumps([dict1, dict2]))
[{}, {}]

Ответ 2

Могу ли я просто предложить, чтобы вам не нужно было упаковывать все твиты в список, а затем делать json.dumps. Вы можете просто записать в файл, как вы идете, а затем загрузить их с помощью:

tweets = []
for line in open('tweets.json', 'r'):
    tweets.append(json.loads(line))

Таким образом, вам не нужно хранить промежуточные объекты Python. Пока вы пишете один полный твит на вызов append(), это должно работать.

Ответ 3

Я столкнулся с этим, потому что я пытался загрузить файл JSON, выгруженный из MongoDB. Это дало мне ошибку

JSONDecodeError: Extra data: line 2 column 1

JSON файл MongoDB содержит по одному объекту на строку, поэтому у меня сработало следующее:

import json    

data = []
with open('data.json') as f:
    for line in f:
        data.append(json.loads(line))

ОБНОВЛЕНИЕ: или, как указано, это можно сократить до:

import json
data = [json.loads(line) for line in open('data.json', 'r')]

Ответ 4

Это также может произойти, если ваш JSON файл - это не только 1 запись JSON. Запись JSON выглядит следующим образом:

[{"some data": value, "next key": "another value"}]

Он открывается и закрывается скобкой [], в скобках находятся фигурные скобки {}. Могут быть много пар скобок, но все заканчивается закрытой скобкой]. Если ваш json файл содержит более одного из них:

[{"some data": value, "next key": "another value"}]
[{"2nd record data": value, "2nd record key": "another value"}]

то load() завершится с ошибкой.

Я проверил это с моим собственным файлом, который терпел неудачу.

import json

guestFile = open("1_guests.json",'r')
guestData = guestFile.read()
guestFile.close()
gdfJson = json.loads(guestData)

Это работает, потому что 1_guests.json имеет одну запись []. В исходном файле, который я использовал all_guests.json, было 6 записей, разделенных символом новой строки. Я удалил 5 записей (которые я уже проверил, чтобы их можно было забронировать с помощью скобок) и сохранил файл под новым именем. Затем работала инструкция загрузки.

Ошибка была

   raise ValueError(errmsg("Extra data", s, end, len(s)))
ValueError: Extra data: line 2 column 1 - line 10 column 1 (char 261900 - 6964758)

PS. Я использую запись слова, но это не официальное название. Кроме того, если ваш файл имеет символы новой строки, такие как мои, вы можете прокручивать его для загрузки() одной записи за раз в json-переменную.

Ответ 5

Однострочник для вашей проблемы:

data = [json.loads(line) for line in open('tweets.json', 'r')]

Ответ 6

Если вы хотите решить эту проблему в двухстрочном режиме, вы можете сделать это следующим образом:

with open('data.json') as f:
    data = [json.loads(line) for line in f]

Ответ 7

Ну, это может кому-то помочь. я только что получил ту же ошибку, в то время как мой файл JSON, как это

{"id":"1101010","city_id":"1101","name":"TEUPAH SELATAN"}
{"id":"1101020","city_id":"1101","name":"SIMEULUE TIMUR"}

и я нашел это уродливым, поэтому я превратил его в своего рода

{
  "datas":[
    {"id":"1101010","city_id":"1101","name":"TEUPAH SELATAN"},
    {"id":"1101020","city_id":"1101","name":"SIMEULUE TIMUR"}
  ]
}

Ответ 8

Я думаю, что сохранение диктовок в списке не является идеальным решением, предложенным @falsetru.

Лучший способ - перебирать диктовки и сохранять их в .json, добавляя новую строку.

наши 2 словаря

d1 = {'a':1}

d2 = {'b':2}

Вы можете написать их в .json

import json
with open('sample.json','a') as sample:
    for dict in [d1,d2]:
        sample.write('{}\n'.format(json.dumps(dict)))

и вы можете прочитать файл JSON без проблем

with open('sample.json','r') as sample:
    for line in sample:
        line = json.loads(line.strip())

просто и эффективно