Уведомления

Группа в Telegram: @pythonsu

#1 Апрель 30, 2014 14:01:49

6b69646372617368
Зарегистрирован: 2014-02-20
Сообщения: 2
Репутация: +  0  -
Профиль   Отправить e-mail  

scrapy pipeline mysql

После того как паук собрал определенные айтемы со страниц нужно, чтобы в некоторой таблице БД проверялось: во-первых, наличие такой же записи – с таким же id, если такой нет, то записать; во-вторых, если такая запись уже есть, то проверять hash_str у нее, в том случае, если они различны (данные поменялись), то делать запись в базу.
Вопрос: как грамотно написать подсчет новых записей в БД ? Допустим, было найдено 5 новых айтемов и у 2 существоваших уже до этого в БД было изменено содержание, нужно в конце работы паука вывести число – 7 этих новых записей.

Офлайн

Board footer

Модераторировать

Powered by DjangoBB

Lo-Fi Version