fuel1986
Фев. 1, 2014 00:18:07
Нужно создать парсер сначала для двух сайтов, если получится буду добавлять ещё, скорость парсинга нужна по максимум 100-150 страниц в 1-2 секунды на каждый сайт, далее идет несложная обработка полученных данных, бюджет на каждый сайт 150-200$, тоесть стартовый бюджет для двух сайтов 300-400$
Если кто готов взятся за работу пишите свои ICQ или skype
Спасибо
Lexander
Фев. 1, 2014 12:00:40
Что-то я сомневаюсь в технической возможности достичь такой скорости.
Удаленный сайт хоть позволяет получить за полсекунды 150 страницы?
И как долго он будет это терпеть, пока не забанит IP?
plusplus
Фев. 2, 2014 18:22:28
Плюс еще урлы этих 150 страниц должны быть заранее известны. Если же нет, и нужно делать паука, то это математически невозможно, т.к. одна страница будет грузиться в лучшем случае 0.1 секунд, следовательно за секунду получится спарсить только 10 страниц. А вообще я парсеры пописываю довольно часто, если задание будет не такое скоростное, то тс пиши на мыло в моем профиле)
lorien
Фев. 3, 2014 10:24:54
skype: lorien.name
terabayt
Фев. 4, 2014 08:12:54
сделаю дешевле, так как уже имеется подобный проект!
python36@yandex.ru