Всем привет.
Не знаю нужно ли кому-то такой парсинг сайтов, но все же напишу)Вообщем, могу парсить по поисковикам сайты по ключевым словам и собрать огромную, очень огромную базу данных.
Чем больше ключевых слов, тем больше база данных.
Парсинг делается такого вида
URL Источник Значение Позиция
http://site.ru Google ключевое слово / место в поисковике № 1
Сайты в основном с выше Тиц 10 - 500, но есть и без Тица.
Таким способом можно собрать огромную базу данных для прогона сайтов с выше 100к, все зависит от количество ключей.
В поиске учитываются около 250 доменов разных зон как:
1) site:AM
2) site:AN
3) site:AO
4) site:AQ
5) site:AR
6) site:ARPA
7) site:AS
8) site:AT
9) site:AU
10) site:com и т.д.
P.S если это никому не надо, я закрою тему

Чем больше ключевых слов, тем больше база данных.
Парсинг делается такого вида
URL Источник Значение Позиция
http://site.ru Google ключевое слово / место в поисковике № 1
Сайты в основном с выше Тиц 10 - 500, но есть и без Тица.
Таким способом можно собрать огромную базу данных для прогона сайтов с выше 100к, все зависит от количество ключей.
В поиске учитываются около 250 доменов разных зон как:
1) site:AM
2) site:AN
3) site:AO
4) site:AQ
5) site:AR
6) site:ARPA
7) site:AS
8) site:AT
9) site:AU
10) site:com и т.д.
P.S если это никому не надо, я закрою тему
