Как закрыть страницы сайта от индексации
Страницы: 1
Как закрыть страницы сайта от индексации, Как закрыть страницы сайта от индексации
По поводу закрытия индексации страницы перерыл кучу страниц и форумов, но у меня все-равно не получается.
Везде пишут для тех, кто уже имеет представление, как это делается, а я не имею.
В общем суть в том, что есть категория сайта. В этой категории только превью на слайдер, т.е. текст до 100 знаков. Мне нужно его закрыть от индекса.
Может мне кто-то рассказать, как это прописать в robots.txt?
Т.е. типа возьми ссылку, ту часть удали, то допиши и добавь в robots.
И пара вопросов в тему. Как закрыть именно страницу сайта? И стоит ли ставить в noindex ссылки на скачивание, например с ифолдера?
Ну какую кучу ты искал?? 

Код
http://www.cy-pr.com/search/?q=%D0%BA%D0%B0%D0%BA+%D0%B7%D0%B0%D0%BA%D1%80%D1%8B%D1%82%D1%8C+%D0%BE%D1%82+%D0% 
B8%D0%BD%D0%B4%D0%B5%D0%BA%D1%81%D0%B0%D1%86%D0%B8%D0%B8


Только не говори что там тоже нет твоего случая.
Цитата
JOK3R. пишет:
Ну какую кучу ты искал??
В гугле есть инструмент Заблокированные URL. Если я в нем вписываю пропишу disallow - он должен мне написать, что раздел заблокирован?
Не знаю, не работаю с гугл вебмастер. 
Если ты хочешь заблокировать раздел, то добавь мета-тег:  <meta name="robots" content="noindex">
Цитата
JOK3R. пишет:
Не знаю, не работаю с гугл вебмастер.
Может я изначально не то искал и не так ставил вопрос. Я пробовал варианты, которые везде пишут...
Как можно проверить заблокирована ли страница от индексации?
Я добавляю ссылки в robots, сейчас попробую метатег добавить, но как узнать дает ли это результат? Какая-нибудь прога или сервис?
robots.txt

Disallow: /site/site.html
Имей больше, чем показываешь. Говори меньше, чем знаешь.
Цитата
Юрий Чернов пишет:
Цитата
JOK3R. пишет:
Не знаю, не работаю с гугл вебмастер.
Может я изначально не то искал и не так ставил вопрос. Я пробовал варианты, которые везде пишут...
Как можно проверить заблокирована ли страница от индексации?
Я добавляю ссылки в robots, сейчас попробую метатег добавить, но как узнать дает ли это результат? Какая-нибудь прога или сервис?Н
Посмотри на странице сайта или есть мета-роботс. Посмотри в site.ru/robots.txt или там прописана эта строка. 

Этого достаточно чтобы узнать. 
закрыть категорию:Закрыть категорию:
----

User-agent: *
Disallow: /ПАПКА С КAТЕГОРИЕЙ/



User-agent: Yandex
Disallow: /ПАПКА С КAТЕГОРИЕЙ/


(ДЛЯ робота яндекса лучше отдельно директивы прописывать).

Чтобы закрыть конкретную страницу, просто указать на ее полный УРЛ
---
Проверить закрылось или нет, можно в Гугл вебмастере или Яндекс вебмастере
Коттеджи в Новосибирске
Бесплатные сайты для представителей Эйвон, Орифлейм, Фаберлик и других МЛМ-компаний
Цитата
Артём Толкачёв пишет:
Disallow: /site/site.html
Адрес в браузере http://www.site/index.php/interesnoe/101-videomontazh
Получается мне нужно вписать http://www.site/index.php/interesnoe/101-videomontazh.html или /interesnoe/101-videomontazh.html ?

Цитата
Алексей пишет:
User-agent: *
Disallow: /ПАПКА С КAТЕГОРИЕЙ/
Я пробовал делать так Disallow: /na-slajder/
Но в гугле  в запрещенных УРЛ при пробном изменении robots он мне не показывает ничего заблокированного, и с УРЛ так же ничего.

Цитата
JOK3R. пишет:
Этого достаточно чтобы узнать.
Мой robots.txt

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Sitemap: http://site/index.php?option=com_xmap&view=xml&tmpl=component&id=1

Т.е. мне достаточно сюда вписать:
Disallow: /na-slajder/
Я так понимаю этого будет достаточно, чтобы закрыть раздел от индексирования?
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
06:34 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 
06:17 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
01:09 Yahoo Scout: Нейро-привет из склепа. Реальный шанс на траф или мимо? 
17:33 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 
15:14 Апдейт Яндекса 7 февраля. Пока серп трясет, некоторые по ботам плачут 
15:10 Google Discover Core Update: Дискавер отделяют от поиска? 
11:30 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 
15:12 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
12:38 Bankomat001 - Сервис обмена электронных валют 
10:42 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 
09:36 Мониторинг обменников Сrypto-scout.io 
05:29 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 
04:20 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
23:26 Sova.gg - надежный обменник криптовалюты. 
07:51 Гильотина для классиков: Клод доедает физические книги 
06:04 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 
05:09 Точные прогнозы на футбол 
23:45 Ставки на супер тренды в спорте 
18:56 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко