robots.txt
Страницы: 1
robots.txt, для джумла 3.2.3
Ребят подскажите как составить роботс на джумле. В данный момент который имеется никак не хочет отправлять картинки в поиск Яши а в гугол регулярно появляются новые по 2-3 шт
Вот что имеется сейчас.
# If the Joomla site is installed within a folder such as at
# e.g. www.example.com/joomla/ the robots.txt file MUST be
# moved to the site root at e.g. www.example.com/robots.txt
# AND the joomla folder name MUST be prefixed to the disallowed
# path, e.g. the Disallow rule for the /administrator/ folder
# MUST be changed to read Disallow: /joomla/administrator/
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/orig.html
#
# For syntax checking, see:
# http://tool.motoricerca.info/robots-checker.phtml

User-agent: *
Disallow: /administrator/
Disallow: /bin/
Disallow: /cache/
Disallow: /cli/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /layouts/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
В инете находил многое но пробывал менял но что яндекс никак
Добавил специально для яндекса.
User-agent: Yandex
Disallow: /administrator/
Disallow: /images/
Disallow: /logs/
Disallow: /components/
Disallow: /materialy/
Disallow: /index.php/
Host: gebert.ru
Sitemap: http://gebert.ru/index.php?option=com_xmap&view=xml&tmpl=component&id=1
Crawl-delay: 3
Вот такой расклад правильный? User-agent: *
Disallow: /administrator/
Disallow: /bin/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /cli/
Disallow: /components/
Disallow: /form/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /layouts/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/

User-agent: Yandex
Disallow: /administrator/
Disallow: /bin/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /cli/
Disallow: /components/
Disallow: /form/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /layouts/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Sitemap: http://gebert.ru/index.php?option=com_xmap&view=xml&tmpl=component&id=1
Crawl-delay: 3
Никто не может подсказать?
Цитата
lait plast пишет:
User-agent: *
Вы с начало указываете для всех роботов
Цитата
User-agent: Yandex

А для чего делать отдельно для Яндекса?
Цитата
User-agent: Yandex
В первом случаи Яндекс и так не зайдет туда куда Вы указали, не вижу смысла делать отдельно для него.
Не забудьте host: vashsait.ru
Цитата
Александр пишет:
В первом случаи Яндекс и так не зайдет туда куда Вы указали, не вижу смысла делать отдельно для него.
Наверно он с первого раза непонимает smile:)
Вычитал что для яндекс отдельно лучше сделать
Цитата
Линклер пишет:
Не забудьте host: vashsait.ru

Хост я ставил но на проверке он ошибку выдает проверял тутhttp://tool.motoricerca.info/robots-checker.phtml
А не подскажете картинок почему нету в яндексе?
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
11:46 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам). 
23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
21:20 Rotapost прикрыли! Чем пользоваться? 
00:23 Раскрутка форума 
00:19 Продвижение по ключам 
17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
14:07 2Index - быстрая индексация страниц сайта и обратных ссылок 
04:13 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
01:31 Сайты с зарубежным трафиком КУПЛЮ 
20:27 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
19:54 SOCKS5 приватные прокси на 30 дней для PayPal 
19:53 Google Voice аккаунты для бесплатных SMS и звонков 
19:53 PayPal аккаунты для любых целей 
17:53 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод 
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 
20:43 Добро пожаловать в цифровой мир... 
15:59 Про мясо 
23:09 ПП от PMS remote.team - 200$ за команду 
13:28 Компьютерная мышь 
22:55 Ну что, кто куда деваете свои сайты? 
22:34 Используете беспроводные наушники?