DjangoBB LoFi version

Полная версия: utf8-escaped в unicode-строке

Начало » Python для экспертов » utf8-escaped в unicode-строке

1 2 3 4

skavans

Авг. 27, 2013 11:59:18

Я вчера ночью, видимо, перепутал строки и в сообщении №1 строка urldecoded не соответствует второй строке, в первой, действительно, “сахалин”, а во второй “лотывлоат”.. Но проблема не в том

Вот код, который полностью развеет все сомнения

>>> str_from_file = '{"url": "http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213"}'
>>> json_obj = json.loads(str_from_file)
>>> json_obj
{u'url': u'http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213'}
>>> url = json_obj['url']
>>> url
u'http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213'
>>> import urllib
>>> urldecoded = urllib.unquote(url)
>>> urldecoded
u'http://yandex.ru/yandsearch?text=\xd0\xbc\xd0\xbe\xd1\x81\xd0\xba\xd0\xb2\xd0\xb0&lr=213'

И проблема в том, как привести вот эту итоговую строку urldecoded к виду 'http://yandex.ru/yandsearch?text=москва&lr=213'
Ну или что я делаю не так?

wbt

Авг. 27, 2013 12:04:35

print u'http://yandex.ru/yandsearch?text=\xd0\xbc\xd0\xbe\xd1\x81\xd0\xba\xd0\xb2\xd0\xb0&lr=213'.encode('latin1').decode('utf-8')
# http://yandex.ru/yandsearch?text=москва&lr=213

4kpt

Авг. 27, 2013 12:08:34

#1
:)
Школьники говорите…

wbt

Авг. 27, 2013 12:18:24

# urldecoded = urllib.unquote(url)
urldecoded = urllib.unquote(str(url))
#urldecoded
urldecoded.decode('utf-8')

4kpt

Авг. 27, 2013 12:20:28

Проще…

import urllib
url='http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213'
print urllib.unquote(url).decode('utf8')

4kpt

Авг. 27, 2013 12:21:05

wbt
Я опоздал :)
Пока набирал :)

wbt

Авг. 27, 2013 12:23:23

4kpt
url='http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213'

у него получается

u'http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213'

а не

'http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213'

собственно, это и есть основная проблема

4kpt

Авг. 27, 2013 12:27:13

Опять я что-то не врубился.

import json
import urllib
str_from_file = '{"url": "http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213"}'
json_obj = json.loads(str_from_file)
print json_obj
url = json_obj['url']
print url
urldecoded = urllib.unquote(url).decode("utf-8")
print urldecoded

Итог

>>> 
{'url': 'http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213'}
http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213
http://yandex.ru/yandsearch?text=москва&lr=213
>>>

skavans

Авг. 27, 2013 12:29:03

wbt, так получилось, спасибо. Не догадался изначальный URL привести к str… Интересно, почему сам питон в результате выдает невалидный объект такой.

4kpt

Авг. 27, 2013 12:30:37

Что-то здесь не то :)

import json
import urllib
str_from_file = '{"url": "http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213"}'
json_obj = json.loads(str_from_file)
print json_obj
url = json_obj['url']
print type(url)

Получаем

{'url': 'http://yandex.ru/yandsearch?text=%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0&lr=213'}
<type 'str'>