Помогите Составить robot.txt для WP
Страницы: 1 2 След.
Помогите Составить robot.txt для WP, я нуб
Здрасти..Помогите уважаемые составить правильно этот робот.тхт и объяснить для чего это делается, и как ?
Можно в icq 954881один
спасибо за внимание!
http://goo.gl/6JBDP $500 за 1000 трафика
Цитата
repente пишет:
робот.тхт
Правильно robots.txt.
Гугл в помощь!smile:)
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: ваш домен

Sitemap: http://ваш домен/sitemap.xml
Цитата
argus пишет:
Disallow: /cgi-bin
Давно в WP папка cgi-bin появилась?
Создание сайтов, верстка | http://www.weesite.ru
Веточка на супре | http://www.cy-pr.com/forum/f74/t16076/
Цитата
Александр Алисейко пишет:
Давно в WP папка cgi-bin появилась?
С рождения.
Изменено: argus - 21 Мая 2012 05:28
Цитата
Александр Алисейко пишет:
Давно в WP папка cgi-bin появилась?
Она не от WP.
Цитата
Jaguar пишет:
Она не от WP.
Шутить изволите smile:sarc:
Цитата
argus пишет:
Шутить изволите smile:sarc:
Я серьезно, у кого хотите спросите.
Вообще, при составлении роботса, лучше все манипуляции проводить в гугл вебмастере и смотреть какие страницы вы блокируете, а какие нет. Дабы пол сайта себе не парализовать. И составлять нужно не от балды, а посмотрев какие адреса страниц со статьями у вас, какие с категориями, остальные дублирующие блокать надо.
Цитата
argus пишет:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: ваш домен

Sitemap: http://ваш домен/sitemap.xml
а если не создавать??..как лучше?
User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?*
Disallow: /*?
Disallow: /2012*
Disallow: /2011*
Disallow: /rubrika*
Disallow: /page*
Host: Свойсайт.ру

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?*
Disallow: /*?
Disallow: /2012*
Disallow: /rubrika*
Disallow: /page*

Sitemap: http://свойсайт.ру/sitemap.xml

У меня такой стоит. Всем все устраивает.
P.s (закрыты все рубрики\каталоги\разделы) Открыты только записи.
Оптимизация сайтов - Заказать!
У тебя пропали позиции? Сайт в АГС? Нету посещений? Позиции калл? Пиши мне!
Цитата
JOK#R пишет:
User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?*
Disallow: /*?
Disallow: /2012*
Disallow: /2011*
Disallow: /rubrika*
Disallow: /page*
Host: Свойсайт.ру

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?*
Disallow: /*?
Disallow: /2012*
Disallow: /rubrika*
Disallow: /page*

Sitemap: http://свойсайт.ру/sitemap.xml

У меня такой стоит. Всем все устраивает.
P.s (закрыты все рубрики\каталоги\разделы) Открыты только записи.
это скопировать надо ? и просто вставить в корень сайта?
Цитата
repente пишет:
это скопировать надо ? и просто вставить в корень сайта?
Да, скопировать вставить в текстовый документ который будет назван - robots.txt 

Прописать только свой сайт там где это указано.
+ В администраторской панели поставить "Вид отображения Адресов - "Название записи". 
*** Важно делать пункт со знаком "+", если этого не будешь делать, не ставь! 
JOK#R
можно вашу асю?
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
06:15 "The web is a dynamic place". Мюллер ответил по шторму 30 января (лучше б молчал) 
06:05 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing 
17:28 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
17:05 Гугл официально убивает клики: кнопка "Show more" теперь открывает чат на весь экран вместо сайтов 
17:00 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент? 
16:31 Плагин ответа 
12:29 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed? 
04:25 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
16:37 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик] 
16:10 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
15:45 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
11:21 Trustpilot Reviews | Подниму рейтинг вашей компании 
11:19 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод 
11:16 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата 
05:56 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
05:31 Ставки на супер тренды в спорте 
01:23 Точные прогнозы на футбол 
17:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 
11:50 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
08:25 Отвратительное поведение 
11:00 Кто может дать инвайт на WebMasters?