Уведомления

Группа в Telegram: @pythonsu

#1 Июнь 20, 2012 13:05:05

agryn
От: Украина
Зарегистрирован: 2011-12-14
Сообщения: 189
Репутация: +  0  -
Профиль   Отправить e-mail  

Библиотека для "веб-архива"

Подскажите есть ли библиотека которую можно назвать “веб-архивом”, то есть нужно сохранять в базу веб-страницу http://site.com/bla-bla-bla а потом по запросу function(site.com/bla-bla-bla) можно получить эту же страницу, в принципе реализовать это не очень сложно, но может быть есть уже “велосипед”?

Отредактировано agryn (Июнь 20, 2012 13:09:48)

Офлайн

#2 Июнь 20, 2012 13:13:39

fata1ex
От:
Зарегистрирован: 2009-07-11
Сообщения: 732
Репутация: +  52  -
Профиль   Отправить e-mail  

Библиотека для "веб-архива"

Это же реализуется в несколько строк с помощью стандартных инструментов - requests + sqlite/pickle.



Офлайн

#3 Июнь 20, 2012 18:25:09

reclosedev
От: Н.Новгород
Зарегистрирован: 2012-03-29
Сообщения: 870
Репутация: +  173  -
Профиль   Отправить e-mail  

Библиотека для "веб-архива"

Не очень понятно, что конкретно имеется ввиду. Опишите для чего это? Должна ли страница сохранятся полностью с картинками (такого точно нет)? Или нужно что-то вроде кэша?

Если нужно для того, чтобы не скачивать страницу несколько раз при грабинге сайта (сужу по предыдущим сообщениям), то можно попробовать http://python-requests.org + requests-cache

Офлайн

#4 Июнь 20, 2012 19:32:56

lorien
От:
Зарегистрирован: 2006-08-20
Сообщения: 755
Репутация: +  37  -
Профиль  

Библиотека для "веб-архива"

> Подскажите есть ли библиотека которую можно назвать “веб-архивом”, то есть нужно сохранять в базу веб-страницу http://site.com/bla-bla-bla а потом по запросу function(site.com/bla-bla-bla) можно получить эту же страницу, в принципе реализовать это не очень сложно, но может быть есть уже “велосипед”?

Вряд ли. Слишком специфично.

Офлайн

Board footer

Модераторировать

Powered by DjangoBB

Lo-Fi Version