Robots.txt

Сообщений: 1177 Регистрация: Окт 2010

3 Января 2012 18:01

Нормальный ли роботс для Ucoz сайтов или есть недочеты?

Цитата

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /images/
Disallow: /js/
Disallow: /icon/

Host: сайт

Sitemap: http://сайт/sitemap.xml
Sitemap: http://сайт/sitemap-forum.xml

User-agent: Yandex
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /images/
Disallow: /js/
Disallow: /icon/
Host: сайт
Sitemap: http://сайт/sitemap.xml

Изменено: Максим Озорнин - 3 Января 2012 18:01

KylukovAV

Сообщений: 1276 Регистрация: Май 2011

3 Января 2012 18:11

Код
/main/

вроде так называется точно не помню год как с юкозом завязал smile;)

, за статистику отвечает вроде

mozambik

Сообщений: 652 Регистрация: Ноя 2011

3 Января 2012 18:21

Небольшие ошибочки.
Директиву host смысл писать только для яндекса.
Карту сайта не нужно дублировать.
Записать в самом конце.

KylukovAV

Сообщений: 1276 Регистрация: Май 2011

3 Января 2012 18:26

еще вспомнил, во память та помнят еще руки smile:D

Код
/_ld/

Максим Озорнин

Сообщений: 1177 Регистрация: Окт 2010

3 Января 2012 18:34

спасибо за помощь, а вот разница есть, Строки?...ну то есть

Цитата
Disallow: /icon/ Host: сайт Sitemap: http://сайт/sitemap.xml Sitemap: http://сайт/sitemap-forum.xml

или

Цитата
Disallow: /icon/ Host: сайт Sitemap: http://сайт/sitemap.xml Sitemap: http://сайт/sitemap-forum.xml

BlackNice

Сообщений: 388 Регистрация: Фев 2011

3 Января 2012 19:09

Цитата

Максим Озорнин пишет:
спасибо за помощь, а вот разница есть, Строки?...ну то есть

Цитата
Disallow: /icon/ Host: сайт Sitemap: http://сайт/sitemap.xml Sitemap: http://сайт/sitemap-forum.xml

или

Цитата
Disallow: /icon/ Host: сайт Sitemap: http://сайт/sitemap.xml Sitemap: http://сайт/sitemap-forum.xml

Без разницы

Лучшая партнерка для онлайн кино

Redrik

Сообщений: 18 Регистрация: Авг 2011

3 Января 2012 19:13

Цитата

Максим Озорнин пишет:
User-agent: Yandex Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Disallow: /shop/order/ Disallow: /images/ Disallow: /js/ Disallow: /icon/ Host: сайт Sitemap: http://сайт/sitemap.xml

Весь этот кусок выбросьте. Строчка User-agent: * открывает индексацию для всех роботов. Делать отдельное приглашение для Яндекса, это какое-то бессмысленное массовое помешательство.

Руслан

Сообщений: 240 Регистрация: Ноя 2011

4 Января 2012 14:18

Народ подскажите у меня проблема, поставил Sitemap все страницы улетели с поисковиков и В Гугле и в Яндексе.
Кто знает Жумлу проверте роботс плиз мож не так что-то влепил
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

Host: http: //www.komandor.dn.ua/

Sitemap: http://www.komandor.dn.ua/index.php?option=com_xmap&sitemap=1

http://www.komandor.dn.ua

Руслан Сообщений: 240 Регистрация: Ноя 2011	#9 4 Января 2012 14:43 Что в Жумле ни кто не шарит?

17.03.2026 21:58	С чего сейчас проще начать?
14.03.2026 15:01	Раскрутка форума
09.03.2026 10:12	Кто-то научился фильтровать новых ИИ-ботов? Метрика сходит с ума
09.03.2026 01:41	Смена струкуры URL сайта плохо для SEO?
09.03.2026 01:39	Как собрать все url страниц сайта?

Новые темы	Объявления	Свободное общение
04:55 interesting for a very long time 01:57 Стоит ли заморачиваться с мейл ру ? 00:12 XEvil - софт для разгадывания капчи. Бесплатная демо-версия. Привязка к SEO/SMM-софту. 23:11 APK на паузе. Google убивает быстрый конверт 16:58 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика 15:38 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 15:09 А+ в MAX: Квитанция на получение денег	08:28 Monitex: Мониторинг с кэшбэком 80% в USDT 02:29 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 01:49 TUNNEL-to-PROXY: превращает тысячи публичных сетевых конфигураций - в стабильные SOCKS5-прокси! 17:21 UltraXchina: Современный сервис обмена Alipay, USDT, Наличные 16:10 JustProxy.Biz - Резидентные прокси без ограничения по трафику 14:56 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 13:01 От $0.015 за IP \| $0.68 за ГБ \| 9PROXY.COM \| 20+ млн резидентных прокси \| 99,95% аптайм \| Без чёрных списков	06:03 Точные прогнозы на футбол 22:52 С юмором по жизни! 21:49 Панель Кнопки соцсетей 09:28 молодильные яблоки и живая вода 21:02 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 15:29 Компьютерная мышь 12:46 Актуально для тех кто хочет заработать в интернете