Помогите с файлом robots

Сообщений: 19 Регистрация: Май 2010

14 Мая 2010 14:31

Помогите сделать нормальный файл он находится по адресу http://udesigner.ru/robots.txt

Просто поисковики че то иногда не довольны.

На каком то сайте анализа он мне показал

Лучше всего сделать один robots.txt, в котором кодировки выдаются по директориям:

user-agent: *
disallow: /alt
disallow: /mac
disallow: /koi

Помогите за ранее спасибо !

И еще че то пишет по поводу кодировки на сайте помогите ((

Изменено: Shadow52rus - 14 Мая 2010 14:32

SoStrong

Сообщений: 5 Регистрация: Апр 2010

14 Мая 2010 15:02

DLE

User-agent: *
Disallow: /*print
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=addnews
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
User-agent: Yandex
Host: www.domain.ru

DLE

User-agent: *
Disallow: /*print
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=addnews
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
User-agent: Yandex
Host: www.domain.ru

IPB

User-agent: *
Disallow: /cgi-bin
Disallow: /admin.php
Disallow: /ipb.html?act=Help
Disallow: /ipb.html?act=Search&f=
Disallow: /ipb.html?act=Members
Disallow: /ipb.html?act=calendar
Disallow: /ipb.html?act=Login&CODE=00
Disallow: /ipb.html?act=Reg&CODE=00
Disallow: /ipb.html?act=Online&CODE=listall&sort_key=click
Disallow: /ipb.html?act=Online&CODE=listall&sort_key=name&sort_order=asc&show_mem=reg
Disallow: /ipb.html?act=Stats
Disallow: /ipb.html?act=Stats&CODE=leaders
Disallow: /ipb.html?act=Reg&CODE=10
Host: www.domain.ru

WordPress

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Allow: /wp-content/uploads

User-agent: Yandex
Host: blogproblog.com
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments

uCoz

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: www.domain.ru
Sitemap:www.domain.ru/sitemap.xml
Sitemap:www.domain..ru/sitemap-forum.xml

SMF

User-agent: *
Disallow: /forum/*action*
Disallow: /forum/*sort*
Disallow: /forum/*msg*
Disallow: /forum/*prev_next*
Disallow: /forum/*;all
Disallow: /forum/*;wap
Disallow: /forum/*;wap2
Disallow: /forum/*;imode
Disallow: /forum/Themes/

Shadow52rus

Сообщений: 19 Регистрация: Май 2010

14 Мая 2010 16:53

WordPress

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Allow: /wp-content/uploads

User-agent: Yandex
Host: blogproblog.com
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments

У меня вордпресс то есть так вот надо ?

Shadow52rus

Сообщений: 19 Регистрация: Май 2010

14 Мая 2010 23:18

В чем прикол ? smile:mad:

Dizzy

Сообщений: 2729 Регистрация: Мар 2010

15 Мая 2010 14:33

В том, что кто-то тут по полной ламерит, а в других темах обсирает уважаемых участников.

Shadow52rus

Сообщений: 19 Регистрация: Май 2010

15 Мая 2010 16:02

Цитата
Dizzy пишет: В том, что кто-то тут по полной ламерит, а в других темах обсирает уважаемых участников.

ты о чем ?

Надо вести подобаюче себя !

Dizzy

Сообщений: 2729 Регистрация: Мар 2010

16 Мая 2010 16:51

Цитата

Joker пишет:

Цитата
Dizzy пишет: В том, что кто-то тут по полной ламерит, а в других темах обсирает уважаемых участников.

Не устал еще, пидрилко? )

Ты опять выходишь на связь, мудило?

Niklan

Сообщений: 1521 Регистрация: Мар 2010

16 Мая 2010 18:11

CityAds - партнерка для игрового и бизнес трафика.

Dizzy

Сообщений: 2729 Регистрация: Мар 2010

16 Мая 2010 19:15

клоуны такие клоуны
Рисунок

Изменено: Dizzy - 16 Мая 2010 19:16

Shadow52rus

Сообщений: 19 Регистрация: Май 2010

#10

17 Мая 2010 11:44

не флудите в теме зае..... уже ! помогите лучше ! smile:mad:

Dizzy

Сообщений: 2729 Регистрация: Мар 2010

#11

17 Мая 2010 14:02

Цитата
Joker пишет: А ты кто ? Себя покажешь? )))) Хотя бы что-то

Не шевелю лишний раз пальцами.

Цитата
помогите лучше !

Как тебе можно помочь, если как ты говориш,

Цитата
Просто поисковики че то иногда не довольны.

кароче конкретизируй проблему..

Shadow52rus

Сообщений: 19 Регистрация: Май 2010

#12

18 Мая 2010 13:02

Файл Роботс нормальный у меня ? или что то не правильно или что то не хватает ?

antontv2006

Сообщений: 13 Регистрация: Мар 2010

#13

24 Мая 2010 17:42

У меня лично такой мож кому поможет после него индекс улучшился
User-Agent: *
Allow: /index.php
Allow: /main/
Allow: /softs/
Allow: /video/
Allow: /music/
Allow: /inter/
Allow: /rusifikator/
Allow: /kis/
Allow: /games/
Allow: /fanis/
Allow: /other/
Allow: /skript/
Allow: /chp/
Allow: /mobilca/
Allow: /dj/
Allow: /

Crawl-delay: 10
Sitemap: http://Сайт.ru/uploads/sitemap.xml

Disallow: /go
Disallow: /search
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /addnews.html
Disallow: /rules.html
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /user/
Disallow: /backup/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Host: Сайт.ru

Dizzy Сообщений: 2729 Регистрация: Мар 2010	#14 24 Мая 2010 19:08 antontv2006, как он может помочь, если ты не указал движок?

Похожие темы:

14.04.2024 15:49	Помогите, пожалуйста, с htaccess
22.06.2022 16:57	Помогите разобраться с виджетом ЕМИАС
05.08.2020 18:11	Помогите с продвижением
06.05.2020 13:43	Помогите узнать источник видео
21.06.2019 20:37	Добавление товаров на Simpla помогите советом! HELP

Читают тему (гостей: 2, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
15:44 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 19:33 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 15:12 Несколько статей хорошо выдаются в Гугле, но отвратительно в Яндексе 13:40 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 11:41 2Index - быстрая индексация страниц сайта и обратных ссылок 23:00 Продвижение по ключам	17:10 AllCharge.online. Современный, быстрый и надёжный обменник 15:24 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 14:48 AlwaysMoney - платформа для обмена криптовалют 14:11 №1 Рассылка / Инвайтинг [TELEGRAM] \| Приватный метод 14:10 Trustpilot Reviews \| Подниму рейтинг вашей компании 14:10 Продвижение YouTube видео в топ поиска \| Любой тип контента \| Гарантия результата 14:10 Установка\|Настройка\|Доработка\|Наполнение сайтов\|Дизайн\|3D\|Видеомонтаж	16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты? 22:34 Используете беспроводные наушники?