Робот TXT

Робот TXT, Помогите пожалуйста

Сообщений: 5 Регистрация: Дек 2010

13 Августа 2011 00:11

Уважаемы коллеги.Не могу понять как правильно прописать робот тхт((все страницы пропали из индекса,может не правильно прописал тхт,помогите пожалуйста,вот мой тхт:

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /tmp/
Disallow: /xmlrpc/
Sitemap: http://www.biznes-lanch.com/index.php?option=com_xmap&sitemap=1&view=xml

User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /tmp/
Disallow: /xmlrpc/
Host: biznes-lanch.com/
Sitemap: http://www.biznes-lanch.com/index.php?option=com_xmap&sitemap=1&view=xml

Это интернет магазин на Joomala+VirtueMart,правильно я прописал?Заранее огромное спасибо!
P.S.Тексты все уникальные 97%))

Изменено: deluxstudio - 13 Августа 2011 00:14

Чико

Сообщений: 64 Регистрация: Апр 2011

13 Августа 2011 10:25

вот держи;

User-agent: Yandex
Disallow: /links.html
Disallow: /bgs/
Disallow: /*print
Disallow: /autobackup.php
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=addnews
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
Host: твой сайт
Sitemap: http://твой сайт/sitemap.xml

User-agent: *
Disallow: /links.html
Disallow: /bgs/
Disallow: /*print
Disallow: /autobackup.php
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=addnews
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
Sitemap: http://твой сай/sitemap.xml

Изменено: Чико - 13 Августа 2011 10:26

deluxstudio

Сообщений: 5 Регистрация: Дек 2010

13 Августа 2011 10:48

извините,что вас отвлекаю.Можете объяснить,какие изменения вы внясли?что у меня было не так?чтоб я знал а будуще))Заранее огромное спасибо!

sharkoster

Сообщений: 139 Регистрация: Май 2010

13 Августа 2011 11:47

Ээ, Чико, у deluxstudio сайт на Джумле, а вы ему robots.txt для dle показываете

и зачем отдельно писать для яндекса?
deluxstudio, вам нужно взять первый верхний вариант и после Disallow: /xmlrpc/ дописать

Код
Allow: / Sitemap: http://www.biznes-lanch.com/index.php?option=com_xmap&sitemap=1&view=xml Host: biznes-lanch.com

то есть:
Разрешить все остальное
карта сайта тут
основной адрес тут

Изменено: sharkoster - 13 Августа 2011 11:48

deluxstudio

Сообщений: 5 Регистрация: Дек 2010

13 Августа 2011 12:03

и в итоге,какой тхт надо прописать?))))

Александр Куликов

Сообщений: 1276 Регистрация: Май 2011

13 Августа 2011 12:16

Цитата
deluxstudio пишет: и в итоге,какой тхт надо прописать?))))

ищите в ftp файл под названием Robots с расширением .тхт его та и нужно изменить

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /tmp/
Disallow: /xmlrpc/
Host: biznes-lanch.com
Sitemap: http://www.biznes-lanch.com/index.php?option=com_xmap&sitemap=1&view=xml

обратите внимание Host: biznes-lanch.com без / нужно прописывать

Изменено: Александр Куликов - 13 Августа 2011 12:17

deluxstudio

Сообщений: 5 Регистрация: Дек 2010

13 Августа 2011 12:25

будем надеятся,что правильно))спасибо!

Алексей

Сообщений: 3 Регистрация: Июн 2011

13 Августа 2011 12:56

У меня так.
Вроде работает нормально.

User-agent: *
Disallow: /panel/
Disallow: /admin/

Sitemap: http://css-54region.ru/sitemap.xml
Sitemap: http://css-54region.ru/sitemap-forum.xml

Host: css-54region.ru

Изменено: Алексей - 13 Августа 2011 12:59

Чико

Сообщений: 64 Регистрация: Апр 2011

13 Августа 2011 14:18

Цитата

sharkoster пишет:
Ээ, Чико, у deluxstudio сайт на Джумле, а вы ему robots.txt для dle показываете
и зачем отдельно писать для яндекса?
deluxstudio, вам нужно взять первый верхний вариант и после Disallow: /xmlrpc/ дописать

Код
Allow: / Sitemap: http://www.biznes-lanch.com/index.php?option=com_xmap&sitemap=1&view=xml Host: biznes-lanch.com

то есть:
Разрешить все остальное
карта сайта тут
основной адрес тут

Да точно я туда и не взглянул у все dle в основном smile:)

Изменено: Чико - 13 Августа 2011 14:18

Похожие темы:

27.01.2026 21:46	перводчик
27.01.2026 17:21	SEO-инструменты слепнут: Ahrefs и Semrush массово банят на сайтах из-за ИИ
26.01.2026 05:40	Кто-то научился фильтровать новых ИИ-ботов? Метрика сходит с ума
25.01.2026 23:21	Раскрутка форума
24.12.2025 09:29	Продвижение по ключам

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
10:51 Плагин ответа 10:26 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing 10:24 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 10:14 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент? 10:09 SEO под нейро 07:19 SEO-инструменты слепнут: Ahrefs и Semrush массово банят на сайтах из-за ИИ 07:08 Статистика по "альтернативе": Есть ли смысл сейчас добавлять сайт в Rambler/Mail?	21:37 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 14:30 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 12:00 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 08:47 Мониторинг обменников Сrypto-scout.io 23:58 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 20:43 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 18:29 Nexulume.com Обменник без AML и KYC	10:21 Список обновленных тем пуст... 01:05 Точные прогнозы на футбол 00:20 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 00:11 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 20:11 Ставки на супер тренды в спорте 06:57 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 15:18 Win 10: Три месяца без обновлений. Как полёт? // Переезд на Win 11 или Linux