Python-сообщество
Форум сайта python.su
- Вы не вошли.
Уведомления
Группа в Telegram: @pythonsu
- Начало
- » Python для новичков
- » Какую стратегию интернет- скрапинга выбрать, чтобы был хороший менеджер нагрузки?
![[RSS Feed]](/static/djangobb_forum/img/feed-icon-small.png "[RSS Feed]")
#1 Окт. 27, 2018 18:50:05
- doza_and
-
-
- От:
- Зарегистрирован: 2010-08-15
- Сообщения: 4138
- Репутация:
253 
- Профиль Отправить e-mail
Какую стратегию интернет- скрапинга выбрать, чтобы был хороший менеджер нагрузки?
AlekseyPython
никак не запускались
asyncio.create_task(worker(f'worker-{i}', queue))
AlekseyPythonПотому что вокеры бесконечные. Если снова что-то напихать в очередь они опять будут работать.
Зачем какие- то кенселы посылать?
Без остановки вокеров процесс тоже будет завершаться но будет ругаться на наличие незавершенных сопрограмм.
Офлайн
- Начало
- » Python для новичков
-
» Какую стратегию интернет- скрапинга выбрать, чтобы был хороший менеджер нагрузки?