Уведомления

Группа в Telegram: @pythonsu

#1 Март 17, 2020 07:19:02

laughingman
Зарегистрирован: 2018-06-21
Сообщения: 29
Репутация: +  0  -
Профиль   Отправить e-mail  

Из-за чего очень много процессов scrapy в дереве процессов, и как с этим бороться

Здравствуйте, подскажите, пожалуйста, почему происходит такое дело. У меня в проекте около двух десятков пауков, но при запуске любого из них в дереве процессов видно, что появляются эти два десятка новых pid с именем scrapy
То есть создается такое впечатление, что какого-бы паука я ни запускал запускаются все.
Почему так и как этого избежать. Вес пауки в папке spiders.
используемая OС centos

Прикреплённый файлы:
attachment scrapy_screenshot.jpg (311,8 KБ)

Офлайн

#2 Март 17, 2020 11:43:17

AD0DE412
Зарегистрирован: 2019-05-12
Сообщения: 1130
Репутация: +  44  -
Профиль   Отправить e-mail  

Из-за чего очень много процессов scrapy в дереве процессов, и как с этим бороться

laughingman



1. пжлст, форматируйте код, это в панели создания сообщений, выделите код и нажмите что то вроде
2. чтобы вставить изображение залейте его куда нибудь (например), нажмите и вставьте ссылку на его url

есчщо

Офлайн

#3 Март 18, 2020 08:53:55

laughingman
Зарегистрирован: 2018-06-21
Сообщения: 29
Репутация: +  0  -
Профиль   Отправить e-mail  

Из-за чего очень много процессов scrapy в дереве процессов, и как с этим бороться


AD0DE412
1. пжлст, форматируйте код, это в панели создания сообщений, выделите код и нажмите что то вроде
Какой код?

Офлайн

Board footer

Модераторировать

Powered by DjangoBB

Lo-Fi Version