Загрузка страницы, чтение значений элементов, загрузка следующей страницы
 

Доброго времени суток!
Есть необходимость написать что-то типа анализатора набора веб-страниц. Функционал следующий: загружаем страницу, читаем значения некоторых полей, сохраняем их в файл, читаем следующую страницу из списка...
Пробовал это все на php+cURL написать, но наличие тьмы ajax & javascript на анализируемых страницах очень усложняет задачу...

По диагонали прочел пару глав из "JavaScript. Подробное руководство, 5 е издание", вычитал оттуда:

location = "http://ya.ru";

и

document.getElementById("elementId").getAttribute("name", "value") ;

Но с лету запустить это не удалось.
Потому, что надо сначала подождать окончания загрузки документа, возможно как то обработать что-то типа Document.OnDocumentCompleted() и в этом обработчике прочитать значения элементов, и вызвать загрузку следующей страницы.

Как это реализовать?

о каких элементах речь, какую информацию нужно из страницы достать?

всмысле надо дождаться загрузки страници боди-онлоад, затем пропарсить страницу, затем что-то с этим отпарсиным сделать, а потом перейти на другую страницу? я всё правильно понял?

Именно. Чистым JS не вышло - там из соображений безопасности не дают доступ к странице, с другого домена. То есть: скрипт создает iframe грузит в него страницу, и не может получить доступ к ее элементам.

Да. Забыл. если фрейму добавить обработчик onLoad то код этого обработчика тоже не может получить доступ к элементам страницы. вот так все хитро

PHP-скрипт. Или Perl(LWP). И не используйте то, что бессмысленно использовать для данной задачи.

Если страницу можно вывести в фрейм, то её можно предварительно прочитать пхп - > Читаеш нужную страницу - > Печатаеш "myvar=Содержимое прочитанного;" и фсё, на онлоад своей страници парсиш майвар с помощью JS. А вобще ничего не мешает и с помощью пхп отпарсить.