Python-сообщество

Vzar · Май 1, 2011 14:52:51

Идея такова. Пишу парсер на питоне и столкнулся с такой проблемой: не могу “схватить” скрытый текст с сайта, типа выпадающего меню.(“выпадает”либо при клике мышкой, либо при наведении) Люди говорят что это реализовано с помощью JS. и CSS.
Подскажите пожалуйста как решить проблему? Т.е нужно как-то “схватить” инфу из выпадающего меню для последующей работы с ней. Например записать в файл.

Ferroman · Май 1, 2011 15:03:23

В любом случае текст такого меню находится либо в тексте страницы, либо подтягивается по какому-либо урлу с сервера. В первом случае надо лишь найти где именно находятся нужные данные на странице и персером их извлечь. Во втором случае — эмулировать ajax-request и получить нужные данные с сервера.

Vzar · Май 1, 2011 17:06:44

эмулировать ajax-request - это как? можно по-подробней?
я делал примерно как было предложено: копировал весь код страницы..но проблема в том что скрытый текст не копируется..

Отредактировано (Май 1, 2011 20:26:33)

Ferroman · Май 4, 2011 16:31:49

Что значит “не копируется”? Давайте подробней, а то у меня хрустальный шар в ремонте.

DcDr · Май 5, 2011 19:04:32

Vzar
эмулировать ajax-request - это как? можно по-подробней?

Что такое AJAX-запрос знаете?

Vzar · Май 5, 2011 23:06:28

Ferroman, согласен..оооооочень криво обьяснил)))
смысл такой, я написал прогу которая в файл копирует html код страницы. вот часть кода, если интересно:

filehandle = urllib.urlopen(link)
myFile = open('kod.html','w')

for lines in filehandle.readlines():
        myFile.write(lines)

myFile.close()
filehandle.close()

и потом с этим кодом работаю..чаще всего просто читаю..не надо вопросов почему просто не зайти через браузер..долго обьяснять)))
но текст и код скрытый, например под спойлером или выпадающее меню не копируется а в некоторых случаях это критично. вот :)

про adjax-запросы знаю очень мало..а уж реализовать молчу..

Отредактировано (Май 5, 2011 23:08:35)

Python-сообщество

Уведомления

#1 Май 1, 2011 14:52:51

нужна помощь по обработке css и js

#2 Май 1, 2011 15:03:23

нужна помощь по обработке css и js

#3 Май 1, 2011 17:06:44

нужна помощь по обработке css и js

#4 Май 4, 2011 16:31:49

нужна помощь по обработке css и js

#5 Май 5, 2011 19:04:32

нужна помощь по обработке css и js

#6 Май 5, 2011 23:06:28

нужна помощь по обработке css и js

Board footer