Настройка robots.txt
Страницы: 1
Настройка robots.txt
Подскажите, если в robots.txt есть такая инструкция:


Disallow: /modules/


будет ли индексироваться такая страница: www.site.ru/modules.php?name=Your_Account
будет. (по-любому будет)
я нармальный, не маньяк, чесна.
пытаюсь поднять сайт о гороскопах csrtife.ru
Disallow: /modules/ запрещает к индексации папку и ее содержимое. А вы указали страницу с расширением  php которая не лежит в ней. если бы ваша страница  modules.php лежала в папке  /modules/, тогда бы поисковик ее не индексировал.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
07:01 SEO под нейро 
06:41 Яндекс туда же: "Нейро" отжал 50% первого экрана. Органический трафик падает 
06:33 Индексирование страниц в Яндексе 
00:11 "The web is a dynamic place". Мюллер ответил по шторму 30 января (лучше б молчал) 
23:34 Гугл официально убивает клики: кнопка "Show more" теперь открывает чат на весь экран вместо сайтов 
23:32 [AI] Хаби Лейм и сделка на $1 млрд. Гений или его развели на фантики? 
23:26 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
06:48 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
23:54 GoodsMoney.io 
23:51 Volna.money 
20:20 Mixmasters - Exchange without AML and KYC 
17:22 TELEGRAM EXPERT — Многоцелевой комбайн по работе с Telegram 
16:49 Nexulume.com Обменник без AML и KYC 
15:35 Продам базу данных предприятий Украины, России, Великобритании, Германии, Испании, Италии, Нидерландов, Польши, Франции, Швейцарии и др. 
05:31 Точные прогнозы на футбол 
23:37 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
23:30 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
23:21 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 
19:06 Отвратительное поведение 
11:00 Кто может дать инвайт на WebMasters? 
17:58 Список обновленных тем пуст...