Python-сообщество

despair4 · Окт. 6, 2014 20:14:06

моя прога получает с хттп сервера в течении нескольких секунд 200 словарей в списке в формате json

можно ли как-то по простому начать работать со словарями по мере подгрузки, не дожидаясь окончания чтения всего урл?

s0rg · Окт. 7, 2014 16:43:19

По хорошему - не стоит так делать, если время передачи неприемлемо - то можно попробовать ужать gzip-ом. Но если очень хочеться посмотрите на торнадо
у него есть асинхронный http-клиент который как раз кусками и читает но вот как вы собираетесь контролиравать, что вам пришли все ContentLength байтов и разбирать поток на куски json-а это на сомостоятельную реализацию )

Rusich · Окт. 7, 2014 17:27:37

https://pypi.python.org/pypi/ijson/ ?

despair4 · Окт. 8, 2014 17:13:58

Rusich
https://pypi.python.org/pypi/ijson/ ?

чет так и не понял как им пользоваться:

res=urllib2.urlopen(req)
    for i in ijson.items(res,""):
        print i

у меня json в виде списка, этот код не перебирает элементы

Python-сообщество

Уведомления

#1 Окт. 6, 2014 20:14:06

json stream

#2 Окт. 7, 2014 16:43:19

json stream

#3 Окт. 7, 2014 17:27:37

json stream

#4 Окт. 8, 2014 17:13:58

json stream

Board footer