Уведомления

Группа в Telegram: @pythonsu

#1 Июнь 25, 2009 22:31:38

blackstone
От:
Зарегистрирован: 2009-06-25
Сообщения: 13
Репутация: +  0  -
Профиль   Отправить e-mail  

Как пропарсить сайт, на котором нужно регистрироваться?

Здравствуйте!

Подскажите пожалуйста самый простой для начинающих способ парсинга содержимого, доступного только после регистрации на сайте.

Что касается обычного парсинга, то тут понятно - берется содержимое и обрабатывается, но что делать когда существует форма регистрации, там наверно надо как-то куку передавать и т.д.


Заранее спасибо!



Офлайн

#2 Июнь 25, 2009 22:42:43

sypper-pit
От: Ulan-Ude(msk)
Зарегистрирован: 2009-01-30
Сообщения: 1102
Репутация: +  6  -
Профиль   Отправить e-mail  

Как пропарсить сайт, на котором нужно регистрироваться?

mehanize для начала по пробуй

Офлайн

#3 Июнь 25, 2009 22:47:23

blackstone
От:
Зарегистрирован: 2009-06-25
Сообщения: 13
Репутация: +  0  -
Профиль   Отправить e-mail  

Как пропарсить сайт, на котором нужно регистрироваться?

sypper-pit
mehanize для начала по пробуй
mechanize - это вроде на руби штука - я ее пробовал, но сейчас интересуюсь как такое же сделать на питоне.



Офлайн

#4 Июнь 25, 2009 22:49:45

sypper-pit
От: Ulan-Ude(msk)
Зарегистрирован: 2009-01-30
Сообщения: 1102
Репутация: +  6  -
Профиль   Отправить e-mail  

Как пропарсить сайт, на котором нужно регистрироваться?

он есть на питоне http://wwwsearch.sourceforge.net/mechanize/

Отредактировано (Июнь 25, 2009 22:50:47)

Офлайн

#5 Июнь 25, 2009 22:51:27

blackstone
От:
Зарегистрирован: 2009-06-25
Сообщения: 13
Репутация: +  0  -
Профиль   Отправить e-mail  

Как пропарсить сайт, на котором нужно регистрироваться?

sypper-pit
он есть на питоне http://wwwsearch.sourceforge.net/mechanize/
Спасибо!



Офлайн

#6 Июнь 26, 2009 10:50:02

bw
От:
Зарегистрирован: 2007-09-26
Сообщения: 938
Репутация: +  20  -
Профиль   Адрес электронной почты  

Как пропарсить сайт, на котором нужно регистрироваться?

Из коробки это всё делается (urllib2).
Я никакими “механизами”, когда возникала такая задача, не заморачивался, хотя пакет выглядит любопытным, надо бы найти время на ознакомление с ним.

..bw



Офлайн

#7 Июнь 26, 2009 11:36:14

sypper-pit
От: Ulan-Ude(msk)
Зарегистрирован: 2009-01-30
Сообщения: 1102
Репутация: +  6  -
Профиль   Отправить e-mail  

Как пропарсить сайт, на котором нужно регистрироваться?

urllib2 тоже хорошо работает , только у меня с ним получилось дольше разбираться

Офлайн

#8 Март 6, 2010 00:57:47

PoshtarBoba
От:
Зарегистрирован: 2009-10-22
Сообщения: 8
Репутация: +  0  -
Профиль   Отправить e-mail  

Как пропарсить сайт, на котором нужно регистрироваться?

тут глянуть можно:
http://python.su/forum/viewtopic.php?id=5427



Офлайн

#9 Март 6, 2010 10:15:25

AlexKiriukha
От:
Зарегистрирован: 2008-02-03
Сообщения: 81
Репутация: +  0  -
Профиль   Отправить e-mail  

Как пропарсить сайт, на котором нужно регистрироваться?

Мне для форм удобнее twill



Офлайн

Board footer

Модераторировать

Powered by DjangoBB

Lo-Fi Version