Что добавить в robots.txt
Страницы: Пред. 1 2 3 След.
Что добавить в robots.txt
Цитата
antisept пишет:
Цитата
Антон Елошин пишет:
ТОесть сайт не индексировался только яндексом ?

сайт не индексировался вообще никакими пс.
Цитата
Антон Елошин пишет:
Спасибо за помощь )

обращайся

не,гуглом индексировался.
а так-то можете закрывать тему )
И ещё,может сайт яндексом не индексируется потому что домену 27 дней ?
Цитата
Антон Елошин пишет:
не,гуглом индексировался.


может гугл к вам так редко заходит? Рано или поздно, с таким роботсом, он бы выпал из индекса, это точно.

Цитата
Антон Елошин пишет:
И ещё,может сайт яндексом не индексируется потому что домену 27 дней ?


нет, возраст домена, в данном случае, значения не имеет.
чё вы тут лечите пацана умники блин всё у него нормальный роботс! хрень ему парите какуету! хоть один из вам имел дело с юкозом???

после создания сайта, 30 дней карантин! НО ЕСЛИ КУПИЛ ПРЕМИУМ(ДОМЕН)! то карантин снимается! и сами админы юкоза советуют не не трогать роботс, потому что он уже и так настроен максимально правильно!

в яше на выдаче стоит по запросу "mapcs.ru"
Нашлось
63 ответа

чё ты хочешь от стольких ответов в яше!
пусть сайт сперва прогоняет по каталогам и всяким другим местам! потом и в выдаче будет!

вот мой роботс всмотрите умники

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /mchat
Disallow: /index/ssylki/
Disallow: /load/vc_nbcvn/
Disallow: /forum
Disallow: /board
Disallow: /blog
Disallow: /photo
Disallow: /stuff
Disallow: /gb
Disallow: /index/0-3
Disallow: /index/0-2
Disallow: /informer/

Sitemap: http://ElectroVsFidget.ru/sitemap.xml

User-agent: Yandex
Host: ElectroVsFidget.ru
ElectroVsFidget.ru
Твой сайт ? smile:D
Ребята посмотрите и мой роботс, плиз komandor.dn.ua может что-то поправить надо. Это мой первый сайт и хотелось бы получить оценку и помощь профи.
Цитата
Антон Елошин пишет:
ElectroVsFidget.ru
Твой сайт ?


Мой а что?
Просто как ты можешь быть норм "советчиком" если ты мне кинул роботс с "ссылкой" на твой сайт...
А для чего в роботе делать ссылки на свой сайт?
Цитата
Антон Елошин пишет:
Просто как ты можешь быть норм "советчиком" если ты мне кинул роботс с "ссылкой" на твой сайт...


короче деревня разбирайся сам! даже объяснять ни чего не охота................

пришел сюда спрашивать! ещё возмущается...... ипануться можно, вот люди пошли...................
Изменено: djphobos - 29 Ноября 2011 19:35
Цитата
djphobos пишет:
Цитата
Антон Елошин пишет:
Просто как ты можешь быть норм "советчиком" если ты мне кинул роботс с "ссылкой" на твой сайт...

короче деревня разбирайся сам! даже объяснять ни чего не охота................
пришел сюда спрашивать! ещё возмущается...... ипануться можно, вот люди пошли...................

Понятно всё с тобой,даже объяснять нечего не захотел , по тому что ничего ответить и не смог,а начал говорить что я деревня и т.д
И ещё правила форума нарушаешь - материшся(в замаскированной форме).
Модеры,закрывайте тему,мне уже помогли)а то будут тут оффтопить
Подскажите мне тоже!
Что значит последняя строчка?
User-agent: *
Disallow: /application/
Disallow: /development/
Disallow: /externals/
Disallow: /temporary/
sitemap: /index.php/sitemap?format=xml&rewrite=1
[/B]
Цитата
antisept пишет:
Цитата
mozambik пишет:
сайт на карантине!

вы статистику смотрели? какой карантин, если сайту уже ~ 4 месяца.
Антон Елошин,
поставьте стандартный robots:
Код
 User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Sitemap: http://mapcs.ru/sitemap.xml
Sitemap: http://mapcs.ru/sitemap-forum.xml 


У меня такая же проблема. Сайту больше 2-ух лет. Стоит стандартный robots.txt, и все было хорошо, пока не поставил на сайте скрипт флеш облако. Взято с этого места. [B]http://forum.ucoz.ru/forum/33-28742-1
После этого решил проверить сайт на посещаемость, на сайте http://be1.ru/stat/ здесь-же узнал что у меня есть ссылки запрещенные к индексации при помощи noindex: 50. при помощи nofollow: 50. После того как удалил со с воего сайта скрипт облака тегов, анализ показывает что запрещенных к индексации ссылок нет. В чем прикол тогда этой статьи? http://www.google.com/support/webmasters/bin/answer.py?answer=156449&hl=ru Нажать:Создать файл robots.txt вручную
Где говорится что:
Блокирование роботов user-agent

В строке Disallow перечисляются страницы, которые необходимо заблокировать. Можно указать конкретный URL или шаблон. Ввод должен начинаться с косой черты (/).

1. Чтобы заблокировать весь сайт, используйте косую черту.

Disallow: /

2. Чтобы заблокировать каталог и все его содержание, введите после названия каталога косую черту.

Disallow: /nenuzhnyj-katalog/

3. Чтобы заблокировать страницу, укажите эту страницу.

Disallow: /lichnyj_file.html
Изменено: Katrin - 30 Ноября 2011 13:45 (Предупреждение! Правила пункт 14 "...излишнее выделение текста в целях привлечения внимания полужирным шрифтом...")
У меня тоже стоял "Облако тегов", но я сайт только сделал и он долго не индексировался, а как убрал этот мод, сразу пошла индексация.
Цитата
Руслан пишет:
Ребята посмотрите и мой роботс, плиз komandor.dn.ua может что-то поправить надо. Это мой первый сайт и хотелось бы получить оценку и помощь профи.

Нормальный роботс, правда не знаю какой движок. Можно добавить директиву Host
Код
Host: komandor.dn.ua

Цитата
Александр Катляров пишет:
Подскажите мне тоже! Что значит последняя строчка?

Ссылка на карту сайта, - помогает роботу быстрее искать новые страницы
Страницы: Пред. 1 2 3 След.
Похожие темы:
Читают тему (гостей: 3, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
15:27 С чего сейчас проще начать? 
15:22 Всем привет! 
15:19 adsense в 2026: кто реально выводит копейку через киргизию? 
15:10 ПС Baidu захватит мир! надевайте тазики 
15:09 AI под надзором. Минцифры готовят клеймо для контента 
14:57 Бесплатное получение бэклинков 
14:50 Биржи ссылок в 2026 - реально ли новичку с одним сайтом поднять копейку? 
15:05 Mixmasters - Exchange without AML and KYC 
13:11 SpeedyIndex - ускорение индексирования ссылок в Google. 100 ссылок в подарок. 
11:11 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата 
11:11 Trustpilot Reviews | Подниму рейтинг вашей компании 
11:11 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод 
11:10 Установка|Настройка|Доработка|Наполнение сайтов|Дизайн|3D|Видеомонтаж 
10:51 От $0.015 за IP | $0.68 за ГБ | 9PROXY.COM | 20+ млн резидентных прокси | 99,95% аптайм | Без чёрных списков 
15:12 Огородники 
14:35 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 
13:41 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 
13:02 С юмором по жизни! 
05:10 Точные прогнозы на футбол 
16:47 Какой фильм вы любите посмотреть перед сном? 
15:46 молодильные яблоки и живая вода