Уведомления

Группа в Telegram: @pythonsu
  • Начало
  • » Network
  • » Многопоточная закачка через различные Socks/HTTP прокси [RSS Feed]

#1 Март 22, 2013 23:43:11

krishnarama
Зарегистрирован: 2013-02-27
Сообщения: 51
Репутация: +  -36  -
Профиль   Отправить e-mail  

Многопоточная закачка через различные Socks/HTTP прокси

В requests keep-alive точно есть, я лучше его автору тогда заплачу, чтобы он прокси добавил А исследовать сишный код у меня нет ни желания, ни навыков, так что сорри.

Пуникод у меня не работал, спишем на старую версию. 'http/россия.рф' - это, надеюсь, юникод?

Офлайн

#2 Март 23, 2013 11:56:40

lorien
От:
Зарегистрирован: 2006-08-20
Сообщения: 755
Репутация: +  37  -
Профиль  

Многопоточная закачка через различные Socks/HTTP прокси

> Пуникод у меня не работал, спишем на старую версию. ‘http/россия.рф’ - это, надеюсь, юникод?

А вы не надейтесь, а в консоли проверьте. Дело пары секунд.

А зачем вы keep-alive, не хотите нагружать удалённый сервер или он реально скачивание информации ускоряет?

Офлайн

#3 Март 23, 2013 13:16:05

krishnarama
Зарегистрирован: 2013-02-27
Сообщения: 51
Репутация: +  -36  -
Профиль   Отправить e-mail  

Многопоточная закачка через различные Socks/HTTP прокси

lorien
А вы не надейтесь, а в консоли проверьте. Дело пары секунд.
У меня на 2.7 это есесно не юникод, но, может быть, у тебя или тройка, или юникодные литералы в двойке.

lorien
А зачем вы keep-alive, не хотите нагружать удалённый сервер или он реально скачивание информации ускоряет?
Охренеть вопрос.

Офлайн

#4 Март 23, 2013 14:19:03

lorien
От:
Зарегистрирован: 2006-08-20
Сообщения: 755
Репутация: +  37  -
Профиль  

Многопоточная закачка через различные Socks/HTTP прокси

Я имел в виду, открыть вашу питонью консоль и проверить там как grab с pynicode работает - дело нескольких секунд. И понимает он или не понимает unicode. На третьем питоне граб, кстати, не работает.

> Охренеть вопрос.

А в чём проблема? Я никогда с этой фичей не замарачивался, хотел информацию новую получить от вас.

Офлайн

#5 Март 23, 2013 20:20:07

krishnarama
Зарегистрирован: 2013-02-27
Сообщения: 51
Репутация: +  -36  -
Профиль   Отправить e-mail  

Многопоточная закачка через различные Socks/HTTP прокси

lorien
Я имел в виду, открыть вашу питонью консоль и проверить там как grab с pynicode работает - дело нескольких секунд.
Я испугался, что в примере grab работал с байтовой строкой - этого явно быть не должно.
0.4.7 с ним не работает.

lorien
А в чём проблема? Я никогда с этой фичей не замарачивался, хотел информацию новую получить от вас.
Странный вопрос от человека, хоть как-то знакомого с http.

Офлайн

#6 Март 23, 2013 21:00:05

plusplus
От:
Зарегистрирован: 2009-01-05
Сообщения: 418
Репутация: +  15  -
Профиль   Отправить e-mail  

Многопоточная закачка через различные Socks/HTTP прокси

krishnarama
Странный вопрос от человека, хоть как-то знакомого с http.
Блин, ну можно ответ уже? Интересно, на самом деле. Зачем второй пост подряд цену набивать, одного достаточно.



Офлайн

#7 Март 24, 2013 14:20:04

dvs
От:
Зарегистрирован: 2006-05-22
Сообщения: 176
Репутация: +  3  -
Профиль   Отправить e-mail  

Многопоточная закачка через различные Socks/HTTP прокси

krishnarama
https://github.com/kennethreitz/requests/pull/478Вот, кстати, нужный тебе функционал: http://docs.python-requests.org/en/latest/user/advanced/#body-content-workflow
вот оно же, пропатченное:
pip install requesocks



Офлайн

#8 Март 24, 2013 15:18:00

krishnarama
Зарегистрирован: 2013-02-27
Сообщения: 51
Репутация: +  -36  -
Профиль   Отправить e-mail  

Многопоточная закачка через различные Socks/HTTP прокси

plusplus
Блин, ну можно ответ уже? Интересно, на самом деле. Зачем второй пост подряд цену набивать, одного достаточно.
google/keep-alive ?
Вы не знаете, что это или прикалываетесь?

dvs, сам патчил?
dvs
pip install requesocks
Неа.

Отредактировано krishnarama (Март 24, 2013 15:19:54)

Офлайн

#9 Март 25, 2013 06:01:38

lorien
От:
Зарегистрирован: 2006-08-20
Сообщения: 755
Репутация: +  37  -
Профиль  

Многопоточная закачка через различные Socks/HTTP прокси

Это одночлен, наверное, или член его секты. Распознать членов этой секты легко: на конкретные прямые вопросы вопросы, заданные несколько раз подряд, продолжает писать отмзаки вместо прямых ответов. Возможно, в силу проблем с психикой видит в этом какие-то попытки приколоться над ним.

Офлайн

#10 Март 25, 2013 11:09:35

krishnarama
Зарегистрирован: 2013-02-27
Сообщения: 51
Репутация: +  -36  -
Профиль   Отправить e-mail  

Многопоточная закачка через различные Socks/HTTP прокси

lorien, может быть, не стоило браться за http библиотеку, не зная таких вещей?

Загугли, честно

Офлайн

  • Начало
  • » Network
  • » Многопоточная закачка через различные Socks/HTTP прокси[RSS Feed]

Board footer

Модераторировать

Powered by DjangoBB

Lo-Fi Version