Форум сайта python.su
Нужно создать парсер сначала для двух сайтов, если получится буду добавлять ещё, скорость парсинга нужна по максимум 100-150 страниц в 1-2 секунды на каждый сайт, далее идет несложная обработка полученных данных, бюджет на каждый сайт 150-200$, тоесть стартовый бюджет для двух сайтов 300-400$
Если кто готов взятся за работу пишите свои ICQ или skype
Спасибо
Офлайн
Что-то я сомневаюсь в технической возможности достичь такой скорости.
Удаленный сайт хоть позволяет получить за полсекунды 150 страницы?
И как долго он будет это терпеть, пока не забанит IP?
Офлайн
Плюс еще урлы этих 150 страниц должны быть заранее известны. Если же нет, и нужно делать паука, то это математически невозможно, т.к. одна страница будет грузиться в лучшем случае 0.1 секунд, следовательно за секунду получится спарсить только 10 страниц. А вообще я парсеры пописываю довольно часто, если задание будет не такое скоростное, то тс пиши на мыло в моем профиле)
Отредактировано plusplus (Фев. 2, 2014 18:26:11)
Офлайн
сделаю дешевле, так как уже имеется подобный проект!
python36@yandex.ru
Офлайн