Уведомления

Группа в Telegram: @pythonsu

#1 Июнь 8, 2014 18:47:56

pood
Зарегистрирован: 2014-06-08
Сообщения: 7
Репутация: +  0  -
Профиль   Отправить e-mail  

srapy + Django ORM и/или SqlAlchemy

Дано:
На первом сервере - django. Есть еще несколько серверов на которых будут запущены srcapy.

Нужно:
Результаты scrapy собирать в одну БД

Проблема:
Как организовать? т.е если для django использовать встроенный ORM, а для scrapy например SqlAlchemy - возникают проблемы идентичности создаваемых таблиц. Если modeles в django со временем изменится - нужно будет также менять model в SqlAlchemy. Прямой insert из scrapy имеет ту же проблему.

Может есть другой подход для синхронизации ? Возможно использовать несколько БД и синхронизировать их средствами самой БД ?

Отредактировано pood (Июнь 8, 2014 18:52:28)

Офлайн

#2 Июнь 18, 2014 00:45:32

Singularity
Зарегистрирован: 2011-07-28
Сообщения: 1387
Репутация: +  75  -
Профиль   Отправить e-mail  

srapy + Django ORM и/или SqlAlchemy

pood
монго?

В джанго есть inspectdb, а в алхимии есть не только подобные решение, но и возможность подцепиться к существующей базе.

Офлайн

Board footer

Модераторировать

Powered by DjangoBB

Lo-Fi Version