Robots.txt

Сообщений: 1177 Регистрация: Окт 2010

3 Января 2012 18:01

Нормальный ли роботс для Ucoz сайтов или есть недочеты?

Цитата

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /images/
Disallow: /js/
Disallow: /icon/

Host: сайт

Sitemap: http://сайт/sitemap.xml
Sitemap: http://сайт/sitemap-forum.xml

User-agent: Yandex
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /images/
Disallow: /js/
Disallow: /icon/
Host: сайт
Sitemap: http://сайт/sitemap.xml

Изменено: Максим Озорнин - 3 Января 2012 18:01

KylukovAV

Сообщений: 1276 Регистрация: Май 2011

3 Января 2012 18:11

Код
/main/

вроде так называется точно не помню год как с юкозом завязал smile;)

, за статистику отвечает вроде

mozambik

Сообщений: 652 Регистрация: Ноя 2011

3 Января 2012 18:21

Небольшие ошибочки.
Директиву host смысл писать только для яндекса.
Карту сайта не нужно дублировать.
Записать в самом конце.

KylukovAV

Сообщений: 1276 Регистрация: Май 2011

3 Января 2012 18:26

еще вспомнил, во память та помнят еще руки smile:D

Код
/_ld/

Максим Озорнин

Сообщений: 1177 Регистрация: Окт 2010

3 Января 2012 18:34

спасибо за помощь, а вот разница есть, Строки?...ну то есть

Цитата
Disallow: /icon/ Host: сайт Sitemap: http://сайт/sitemap.xml Sitemap: http://сайт/sitemap-forum.xml

или

Цитата
Disallow: /icon/ Host: сайт Sitemap: http://сайт/sitemap.xml Sitemap: http://сайт/sitemap-forum.xml

BlackNice

Сообщений: 388 Регистрация: Фев 2011

3 Января 2012 19:09

Цитата

Максим Озорнин пишет:
спасибо за помощь, а вот разница есть, Строки?...ну то есть

Цитата
Disallow: /icon/ Host: сайт Sitemap: http://сайт/sitemap.xml Sitemap: http://сайт/sitemap-forum.xml

или

Цитата
Disallow: /icon/ Host: сайт Sitemap: http://сайт/sitemap.xml Sitemap: http://сайт/sitemap-forum.xml

Без разницы

Лучшая партнерка для онлайн кино

Redrik

Сообщений: 18 Регистрация: Авг 2011

3 Января 2012 19:13

Цитата

Максим Озорнин пишет:
User-agent: Yandex Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Disallow: /shop/order/ Disallow: /images/ Disallow: /js/ Disallow: /icon/ Host: сайт Sitemap: http://сайт/sitemap.xml

Весь этот кусок выбросьте. Строчка User-agent: * открывает индексацию для всех роботов. Делать отдельное приглашение для Яндекса, это какое-то бессмысленное массовое помешательство.

Руслан

Сообщений: 240 Регистрация: Ноя 2011

4 Января 2012 14:18

Народ подскажите у меня проблема, поставил Sitemap все страницы улетели с поисковиков и В Гугле и в Яндексе.
Кто знает Жумлу проверте роботс плиз мож не так что-то влепил
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

Host: http: //www.komandor.dn.ua/

Sitemap: http://www.komandor.dn.ua/index.php?option=com_xmap&sitemap=1

http://www.komandor.dn.ua

Руслан Сообщений: 240 Регистрация: Ноя 2011	#9 4 Января 2012 14:43 Что в Жумле ни кто не шарит?

Новые темы	Объявления	Свободное общение
14:31 Rotapost прикрыли! Чем пользоваться? 00:23 Раскрутка форума 00:19 Продвижение по ключам 17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 14:07 2Index - быстрая индексация страниц сайта и обратных ссылок 12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 22:23 Подскажите нормальный сервис накрутки ПФ	16:15 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 16:04 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 05:30 CoinCapital 04:22 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 20:30 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 19:53 №1 Рассылка / Инвайтинг [TELEGRAM] \| Приватный метод 19:52 Trustpilot Reviews \| Подниму рейтинг вашей компании	16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты? 22:34 Используете беспроводные наушники?

Новые темы

Объявления

Свободное общение

14:31 Rotapost прикрыли! Чем пользоваться?
00:23 Раскрутка форума
00:19 Продвижение по ключам
17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
14:07 2Index - быстрая индексация страниц сайта и обратных ссылок
12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
22:23 Подскажите нормальный сервис накрутки ПФ

16:15 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника
16:04 CryptoGraph — Анонимный обмен криптовалют без KYC и AML
05:30 CoinCapital
04:22 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
20:30 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
19:53 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод
19:52 Trustpilot Reviews | Подниму рейтинг вашей компании

16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру
20:43 Добро пожаловать в цифровой мир...
15:59 Про мясо
23:09 ПП от PMS remote.team - 200$ за команду
13:28 Компьютерная мышь
22:55 Ну что, кто куда деваете свои сайты?
22:34 Используете беспроводные наушники?

08.11.2025 00:23	Раскрутка форума
08.11.2025 00:19	Продвижение по ключам
12.09.2025 08:27	Ищу специалистов
10.09.2025 08:12	ру гембла
09.09.2025 09:18	Влияние использования ИИ для написания текстов на позицию в поисковой выдаче