Форум сайта python.su
0
Подскажите есть ли библиотека которую можно назвать “веб-архивом”, то есть нужно сохранять в базу веб-страницу http://site.com/bla-bla-bla а потом по запросу function(site.com/bla-bla-bla) можно получить эту же страницу, в принципе реализовать это не очень сложно, но может быть есть уже “велосипед”?
Отредактировано agryn (Июнь 20, 2012 13:09:48)
Офлайн
52
Это же реализуется в несколько строк с помощью стандартных инструментов - requests + sqlite/pickle.
Офлайн
173
Не очень понятно, что конкретно имеется ввиду. Опишите для чего это? Должна ли страница сохранятся полностью с картинками (такого точно нет)? Или нужно что-то вроде кэша?
Если нужно для того, чтобы не скачивать страницу несколько раз при грабинге сайта (сужу по предыдущим сообщениям), то можно попробовать http://python-requests.org + requests-cache
Офлайн
> Подскажите есть ли библиотека которую можно назвать “веб-архивом”, то есть нужно сохранять в базу веб-страницу http://site.com/bla-bla-bla а потом по запросу function(site.com/bla-bla-bla) можно получить эту же страницу, в принципе реализовать это не очень сложно, но может быть есть уже “велосипед”?
Вряд ли. Слишком специфично.
Офлайн