Javascript-форум (https://javascript.ru/forum/)
-   Javascript под браузер (https://javascript.ru/forum/css-html/)
-   -   Перебор сайтов (https://javascript.ru/forum/css-html/73538-perebor-sajjtov.html)

Viva13 24.04.2018 10:34

Перебор сайтов
 
Всем привет!
Вот решил немного потренироватся в новой области.
Стоит задача - перебрать несколько десятков сайтов и найти на них определенные слова.
Как это лучше сделать?
Думал получить весь текст сайта и сделать поиск этих слов.

Nexus 24.04.2018 10:39

google.ru » Request: "site:<address> <search phrase>" » Find.

Viva13 24.04.2018 11:17

А более подробно?

j0hnik 24.04.2018 11:26

Цитата:

Сообщение от Nexus (Сообщение 483893)
google.ru » Request: "site:<address> <search phrase>" » Find.

при условии что страница в индексе.

j0hnik 24.04.2018 11:35

Viva13,
если нужных страниц в индексе нет, нужен будет парсер, которых на просторе интернета множество.

Viva13 24.04.2018 11:37

К сожалению, я тут полный ноль.
Хоть приблизительный текст можешь скинуть? и как им пользоватся

j0hnik 24.04.2018 11:44

текст чего? Nexus вам написал текст.
зайти в гугл
site:ваш-сайт.ру ваше-слово
найти

если про парсер то это программа а не текст.

Viva13 24.04.2018 11:48

Текст программы-парсера. С ним позанимаюсь!

Viva13 24.04.2018 11:55

Проблема в том, что сайтов очень много, и каждый прописывать - замучаешся...

j0hnik 24.04.2018 12:06

Viva13,
https://github.com/hacker1999/asdfgh...ter/crawler.js


Часовой пояс GMT +3, время: 23:24.