DjangoBB LoFi version

Полная версия: Поисковый паук. Как вы это видите?

Начало » Python проекты » Поисковый паук. Как вы это видите?

jokeyy

Март 2, 2020 23:19:15

Добрый день.
Может кто-то писал что-то на подобие поискового паука. Который бы переходил по страницам сайта и по ссылкам на другие сайты. И собирал какую-либо информацию?

Так же будет интересна теория от тех, кто не делал, но понимает о чем речь.

doza_and

Март 3, 2020 06:44:16

вот так видим теорию.
https://ru.wikipedia.org/wiki/%D0%92%D0%B5%D0%B1-%D1%81%D0%BA%D1%80%D0%B5%D0%B9%D0%BF%D0%B8%D0%BD%D0%B3
https://en.wikipedia.org/wiki/Web_scraping
https://habr.com/ru/post/280238/