файл robots.txt отсутствует
Страницы: 1
файл robots.txt отсутствует
Подскажите что должно быть в этом файле, чтоб роботы номально индексировали сайт.
Спроси у googla он больше скажет. (всегда поражаюсь над такими вопросами)
Цитата
Спроси у googla он больше скажет. (всегда поражаюсь над такими вопросами)


у гугла спрашивал!
хочу услышать ответ знающего человека!
robotstxt.org.ru
robot.txt-нужен для того чтобы запретить ту или иную страницу к индексации!
но лучше запретить индексацию-тем страницам которые не интересые пользователям!чтоб робот пс не тратил силы на лазания по ним!а чтоб лучше индексировал хороший материал вашего сайта!

Лучше создавать фаил сайтмап!И заказать у специалистов этот-robot.txt!!!!
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
19:29 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
17:29 Как продвигать сайт с неуникальным контентом 
14:50 Индексация страниц 
12:36 У кого новостник, дайте пару советов плиз 
13:53 AviTool - мощный инструмент для автоматизации работы с Avito 
17:01 Absence в Армении 
23:19 Ребята подскажите какими сервисами и прогами вы пользуетесь для SEO продвижения? 
15:31 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру) 
13:09 swapsfera.com 
13:08 garantcoin.io - быстрый и надёжный сервис обмена криптовалюты GarantCoin 
12:31 GoodsMoney.io 
12:26 Разработка сайта, интернет-магазина, каталога на Joomla 5 и выше – опыт с 2009 года. 
11:13 Telegram Bot автопродаж Google Voice , Old USA Gmail 2006 - 2016. 
11:13 SpaceSwap.cc - Быстрый и надежный обменник криптовалют 
23:07 Ну что, кто куда деваете свои сайты? 
19:30 Добро пожаловать в цифровой мир... 
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 
22:08 Накрутка поисковых подсказок 
05:04 Точные прогнозы на футбол 
14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди