Уведомления

Группа в Telegram: @pythonsu

#1 Июнь 30, 2011 10:06:07

exe1389
От:
Зарегистрирован: 2011-06-30
Сообщения: 1
Репутация: +  0  -
Профиль   Отправить e-mail  

Нужна консультация по написанию бота, бот для мониторинга цен на сайте

Доброго времени суток!
Нужна помощь в написании бота для мониторинга цен на сайте (на самом сайте есть артикулы, он должен находить их на странице с товаром и вписывать цену в бд(нужно ещё кучу атрибутов, но по аналогии разберусь)
основные вопросы:
- что для этого нужно (какой софт)
- какие первые шаги для его создания
- и как он будет выглядеть (примерно)


———–
я извиняюсь что может быть задаю тупые вопросы, но я только учусь…



Офлайн

#2 Июнь 30, 2011 14:42:52

appetito
От:
Зарегистрирован: 2010-09-28
Сообщения: 147
Репутация: +  2  -
Профиль   Отправить e-mail  

Нужна консультация по написанию бота, бот для мониторинга цен на сайте

можно использовать http://scrapy.org/



Офлайн

#3 Июль 1, 2011 16:08:03

plastun
От:
Зарегистрирован: 2011-01-18
Сообщения: 15
Репутация: +  0  -
Профиль   Отправить e-mail  

Нужна консультация по написанию бота, бот для мониторинга цен на сайте

Если не использовать фрейворки, то Вам понадобятся:
- lxml (для парсинга html/xml),
- XPath (есть в lxml) или re (для извлечения требуемых данных из html/xml),
- urllib, urllib2 для загрузки данных из сети,
- стандартные модули Python для организации алгоритмов загрузки, парсинга, ожидания.



Офлайн

Board footer

Модераторировать

Powered by DjangoBB

Lo-Fi Version