robots.txt для сайта рф

Сообщений: 127 Регистрация: Янв 2012

4 Августа 2017 03:52

Всем привет, ну никак не могу я разобраться с этим файлом robots.txt для сайта на кирилице рф. Может кто предложит какой нибудь вариант файла robots.txt

masterrabot

Сообщений: 1752 Регистрация: Янв 2016

4 Августа 2017 06:24

А что, для сайта на кирилице рф. robots чем-то должен отличаться от обычного robots.txt для Wordrpess?

maratmd

Сообщений: 127 Регистрация: Янв 2012

4 Августа 2017 06:29

Ну я имею ввиду пуникод

Bibik

Сообщений: 268 Регистрация: Ноя 2011

4 Августа 2017 08:35

Переводите все адреса в пуникод конвертёром, потом в ВебМастере проверяйте доступна ли страница и sitemaps боту.

instaplus.by - продвижение вашего бизнеса в Instagram
твонлайн.бел - Архив телеканалов

Froloff161

Сообщений: 51 Регистрация: Сен 2016

4 Августа 2017 16:34

Цитата
maratmd пишет: Ну я имею ввиду пуникод

Куникод

maratmd

Сообщений: 127 Регистрация: Янв 2012

6 Августа 2017 22:18

Может кто пример robots написать для сайта https://xn--80aavwspm.xn--p1ai/ может кто предложит вариант на кириллице?

Принципал

Сообщений: 1305 Регистрация: Июл 2012

6 Августа 2017 23:07

Цитата
maratmd пишет: вариант на кириллице?

Может быть нужно вместо robots.txt писать роботс.ткст?

maratmd

Сообщений: 127 Регистрация: Янв 2012

7 Августа 2017 04:50

Цитата

Принципал пишет:

Цитата
maratmd пишет: вариант на кириллице?

Может быть нужно вместо robots.txt писать роботс.ткст?

Нужен вариант для сайта с доменом рф, с использованием Punycode. Это у меня первый сайт c доменом рф, и к тому же с woocomerce

Новые темы	Объявления	Свободное общение
12:18 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 09:36 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed? 09:26 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing 08:53 Нашел скрины выплат с Сапы за 2010 год. Пошел плакать 19:27 Плагин ответа 19:20 SEO под нейро 19:16 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент?	12:09 Trustpilot Reviews \| Подниму рейтинг вашей компании 12:07 Купить отзывы на Яндекс и Гугл картах, на Авито, на Отзовике и IRecommend 12:06 №1 Рассылка / Инвайтинг [TELEGRAM] \| Приватный метод 11:59 Продвижение сайта: [SEO-трафик][Вывод в ТОП][Крауд-маркетинг + SEO] 11:58 Продвижение YouTube видео в топ поиска \| Любой тип контента \| Гарантия результата 11:58 Современный скрипт обменника электронных валют 11:57 Установка\|Настройка\|Доработка\|Наполнение сайтов\|Дизайн\|3D\|Видеомонтаж	10:31 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 09:23 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 07:11 Список обновленных тем пуст... 05:23 Точные прогнозы на футбол 01:02 Ставки на супер тренды в спорте 17:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 08:25 Отвратительное поведение

Новые темы

Объявления

Свободное общение

12:18 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?
09:36 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed?
09:26 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing
08:53 Нашел скрины выплат с Сапы за 2010 год. Пошел плакать
19:27 Плагин ответа
19:20 SEO под нейро
19:16 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент?

12:09 Trustpilot Reviews | Подниму рейтинг вашей компании
12:07 Купить отзывы на Яндекс и Гугл картах, на Авито, на Отзовике и IRecommend
12:06 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод
11:59 Продвижение сайта: [SEO-трафик][Вывод в ТОП][Крауд-маркетинг + SEO]
11:58 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата
11:58 Современный скрипт обменника электронных валют
11:57 Установка|Настройка|Доработка|Наполнение сайтов|Дизайн|3D|Видеомонтаж

10:31 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко
09:23 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес
07:11 Список обновленных тем пуст...
05:23 Точные прогнозы на футбол
01:02 Ставки на супер тренды в спорте
17:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем
08:25 Отвратительное поведение

31.01.2024 20:42	Как закрыть от индексации некоторые блоки сайта
28.12.2022 12:15	Посоветуйте Бесплатный плагин Интернационализации сайта для Вордпресс
15.08.2021 17:39	Как убрать смещение меню сайта
15.08.2020 20:48	SEO-оптимизация сайта на WordPress
28.07.2020 19:39	Как всунуть в фон сайта