Файл роботс TXT
Страницы: 1
Файл роботс TXT
Всем привет. Помогите так как я в этом не мастер.У меня файл роботс с таким текстом :



# If the Joomla site is installed within a folder such as at
# e.g. www.example.com/joomla/ the robots.txt file MUST be
# moved to the site root at e.g. www.example.com/robots.txt
# AND the joomla folder name MUST be prefixed to the disallowed
# path, e.g. the Disallow rule for the /administrator/ folder
# MUST be changed to read Disallow: /joomla/administrator/
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/orig.html
#
# For syntax checking, see:
# http://www.sxw.org.uk/computing/robots/check.html

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/



И я подозреваю что из-за этого у меня вторую неделю в индексе яши только одна страница. 
Да еще и файл этот с разрешением (.dist)   

Подскажите как исправить. Заранее спасибо...
Цитата
Bob mobobob пишет:
вторую неделю в индексе яши только одна страница.
если сайт молодой то это нормально ... у некоторых 2 месяца одна страница висит.
Цитата
Да еще и файл этот с разрешением
а вот разрешение должно быть .тхт

п.с. можно я в вашей теме спрошу про роботс, надеюсь вы не будите против smile:)
Ищу как закрыть постраничную навигацию и никак не найду инфы, проблема заключается в том что страница не имеет приписки, а ставится просто цифра.

пример:
сайт/категория.штмл
сайт/категория/2.штмл
сайт/категория/3.штмл

полностью цифру к индексации нельзя запретить, тк в имени страницы часто упоминаются цифры.
Подскажите кто в курсе ?
Изменено: Denis - 25 Ноября 2013 18:13
Подскажите правильный роботс. Чтобы поисковики индексировали
на начальном этапе всегда ставлю две строчки:

User-agent: *
Allow: /

А потом уже ненужное к индексации закрываю постранично.Закрыть страницу от индексации можно проставив тег noindex в исходный код страницы.
Не знаю насколько верно, но все сайты достаточно быстро в индекс входят
Изменено: Ольга - 25 Ноября 2013 19:18
Да всё у тебя нормально с роботс. Жди и всё появится.smile:)
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
22:27 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
12:39 2Index - быстрая индексация страниц сайта и обратных ссылок 
06:17 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
11:46 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам). 
23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
21:20 Rotapost прикрыли! Чем пользоваться? 
00:23 Раскрутка форума 
16:17 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
13:51 Скрипт обменника валют 
07:11 Купить отзывы на Яндекс и Гугл картах, на Авито, на Отзовике и IRecommend 
04:10 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
13:51 CryptoMonitor.info - ваш надеждный обменник BTC USDT XMR (без KYC) 
13:16 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
11:11 Belurk — высокоскоростные анонимные прокси от 0,24 рублей 
10:29 С юмором по жизни! 
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 
20:43 Добро пожаловать в цифровой мир... 
15:59 Про мясо 
23:09 ПП от PMS remote.team - 200$ за команду 
13:28 Компьютерная мышь 
22:55 Ну что, кто куда деваете свои сайты?