Нужен файл роботс для вордпресс.

Сообщений: 5 Регистрация: Фев 2020

24 Февраля 2020 08:37

Привет. Обычный сайт на вордпресс. Тема тортуга. Нужен корректный робот. Что не делал - то то не так то это. Нужно что бы поисковики видели страницы сайта (мной созданные) и записи. Остальное закрыть. А то я какой то роботс поставил - яндекс доволен а гугл ругается - запрет индексации. Вот)))

Андрей Кобяков

Сообщений: 527 Регистрация: Фев 2011

24 Февраля 2020 13:06

Стоит на всех сайтах много лет. Претензий нет.

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*/page/*/
Disallow: /wp-json/

Host: https://ваш_сайт

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*/page/*/

Sitemap: https://ваш_сайт/sitemap.xml

Иван Трефолев

Сообщений: 5 Регистрация: Фев 2020

24 Февраля 2020 13:18

Цитата

Андрей Кобяков пишет:
Стоит на всех сайтах много лет. Претензий нет.

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*/page/*/
Disallow: /wp-json/

Host: https://ваш_сайт

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*/page/*/

Sitemap: https://ваш_сайт/sitemap.xml
Благодарствую. Вечером скормлю сайту)

Новые темы	Объявления	Свободное общение
15:08 Стоит ли добавлять сайт в Rambler топ 100? 12:59 Absence в Армении 19:29 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 17:29 Как продвигать сайт с неуникальным контентом 14:50 Индексация страниц 12:36 У кого новостник, дайте пару советов плиз 13:53 AviTool - мощный инструмент для автоматизации работы с Avito	17:24 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 14:01 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 13:15 SOCKS5 приватные прокси на 30 дней для PayPal 13:14 Google Voice аккаунты для бесплатных SMS и звонков 13:13 PayPal аккаунты для любых целей 13:11 13:03 swapsfera.com	15:27 Ну что, кто куда деваете свои сайты? 15:07 Добро пожаловать в цифровой мир... 19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 22:08 Накрутка поисковых подсказок 05:04 Точные прогнозы на футбол 14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди

Новые темы

Объявления

Свободное общение

15:08 Стоит ли добавлять сайт в Rambler топ 100?
12:59 Absence в Армении
19:29 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
17:29 Как продвигать сайт с неуникальным контентом
14:50 Индексация страниц
12:36 У кого новостник, дайте пару советов плиз
13:53 AviTool - мощный инструмент для автоматизации работы с Avito

17:24 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc
14:01 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
13:15 SOCKS5 приватные прокси на 30 дней для PayPal
13:14 Google Voice аккаунты для бесплатных SMS и звонков
13:13 PayPal аккаунты для любых целей
13:11
13:03 swapsfera.com

15:27 Ну что, кто куда деваете свои сайты?
15:07 Добро пожаловать в цифровой мир...
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор
22:08 Накрутка поисковых подсказок
05:04 Точные прогнозы на футбол
14:01 Union Pharm - топовая фарма-партнерка для профессионалов!
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди

08.08.2023 20:51	Нужен совет по плагину Elementor
07.05.2021 01:48	Страницы медиафайлов vs. обычные
16.01.2021 15:01	Нужен плагин или хак для кэширования запросов базы данных
02.04.2020 19:27	Нужен специалист на вордпресс
12.02.2019 12:26	Помогите вынести скрипт в отдельный файл и запретить его загрузку на мобильный устройствах