|
#1
2 Ноября 2012 00:13
Привет, пробую собрать свою базу для прогонов (для личного пользования), встал вопрос проверки запрет индексации в robots.txt
Есть ли способ массово проверить наличие строки запрета? В ручную лопатить более 1к сайтов нет желания.
Изменено:
Алик Яушев - 2 Ноября 2012 00:14
|
|
#2
2 Ноября 2012 02:15
|
|
#3
2 Ноября 2012 02:20
Алик Яушев, сайт пожалейте)
|
|
#4
2 Ноября 2012 09:24
Lawyer, не совсем понял, жалеть почему? Речь идет о поиске качественного донора, а не база на 100500 разношерстных сайтов.
И вам ли говорить, прогонщику  или мы о разном? |
|
#5
2 Ноября 2012 09:44
Linking The Web - бесплатная, довольно качественно обнаруживает закрытость.
|
|
#6
2 Ноября 2012 11:16
OMNI, вы ей сами пользовались? Скачал, начинаю тестовую проверку - выскакивает ошибка, извинения и автоматическое закрытие программы. Есть мануал какой-то по этой программе чтобы проверить запрет в роботс?
|
|
#7
12 Января 2013 20:54
ТС взгляните программу (линк затёр) LinkBek новое название LinkBek_Pro_Chek именно то что вы ищите
Изменено:
Prapovednik - 4 Мая 2015 07:25
(линк затёр)
|
|
#8
1 Апреля 2013 00:39
LinkBek кстати очень крутая прога. Проверяет не только запрет в robots, но и nofollow, noindex, redirect
|
|
#9
1 Апреля 2013 07:00
 |
||||
| 12.11.2023 13:12 | Массовая проверка ИКСа [Бесплатно] |
| 20.09.2022 08:26 | Проверка правописания в популярных браузерах может красть пароли и данные пользователей |
| 15.07.2022 17:27 | Проверка позиций |
| 22.03.2021 15:47 | Проверка подписи на кликабельность |
| 05.06.2020 00:40 | Массовая вакцинация россиян от коронавируса |
23.11.2023 (604 дня назад)
01.04.2025 (109 дней назад)
