Файл роботс TXT
Страницы: 1
Файл роботс TXT
Всем привет. Помогите так как я в этом не мастер.У меня файл роботс с таким текстом :



# If the Joomla site is installed within a folder such as at
# e.g. www.example.com/joomla/ the robots.txt file MUST be
# moved to the site root at e.g. www.example.com/robots.txt
# AND the joomla folder name MUST be prefixed to the disallowed
# path, e.g. the Disallow rule for the /administrator/ folder
# MUST be changed to read Disallow: /joomla/administrator/
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/orig.html
#
# For syntax checking, see:
# http://www.sxw.org.uk/computing/robots/check.html

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/



И я подозреваю что из-за этого у меня вторую неделю в индексе яши только одна страница. 
Да еще и файл этот с разрешением (.dist)   

Подскажите как исправить. Заранее спасибо...
Цитата
Bob mobobob пишет:
вторую неделю в индексе яши только одна страница.
если сайт молодой то это нормально ... у некоторых 2 месяца одна страница висит.
Цитата
Да еще и файл этот с разрешением
а вот разрешение должно быть .тхт

п.с. можно я в вашей теме спрошу про роботс, надеюсь вы не будите против smile:)
Ищу как закрыть постраничную навигацию и никак не найду инфы, проблема заключается в том что страница не имеет приписки, а ставится просто цифра.

пример:
сайт/категория.штмл
сайт/категория/2.штмл
сайт/категория/3.штмл

полностью цифру к индексации нельзя запретить, тк в имени страницы часто упоминаются цифры.
Подскажите кто в курсе ?
Изменено: Denis - 25 Ноября 2013 18:13
Подскажите правильный роботс. Чтобы поисковики индексировали
на начальном этапе всегда ставлю две строчки:

User-agent: *
Allow: /

А потом уже ненужное к индексации закрываю постранично.Закрыть страницу от индексации можно проставив тег noindex в исходный код страницы.
Не знаю насколько верно, но все сайты достаточно быстро в индекс входят
Изменено: Ольга - 25 Ноября 2013 19:18
Да всё у тебя нормально с роботс. Жди и всё появится.smile:)
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
07:28 SEO под нейро 
16:04 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 
11:48 Google - шантажист, а Cloudflare - не спаситель. Как не отлететь в бан 
11:47 Старые кости или свежее мясо? Как нагнуть старичка в серпе за один год 
11:45 10.02 Яндекс штормит, а Google лезет в долги: 15 миллиардов на железки для ИИ 
20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 
20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 
04:08 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
02:11 Crypto Mixer ↔ Bitcoin Mixer ↔ Cryptocurrency tumbler ↔ No-AML 
20:15 Nexulume.com Обменник без AML и KYC 
17:47 Продажа аккаунтов HH.RU 
17:06 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 
16:53 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно 
12:59 Mixmasters - Exchange without AML and KYC 
01:00 Точные прогнозы на футбол 
21:50 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 
21:25 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 
20:54 Туалетные секреты: Замурчательная тема 
17:44 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
15:24 Сайты Рунета 
15:22 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось?