Как сделать правильно robot.txt
Страницы: 1 2 След.
Как сделать правильно robot.txt, Все разные
Яндекс указывает ошибку "Найдено несколько правил вида 'User-agent: * " Начал смотреть, действительно в некоторых robot.txt эти слова написаны 2 раза. В некоторых один. Начал смотреть все свои робот на разных сайтах и все они разные. Все сайты на ВП, один самописный. 1. Этих роботов создает сам ВП?
2. Почему они разные?
3. Какой оптимальный?
Немного изучил информацию. И понял, что для моих сайтов этот файл вообще не нужен. На ВП этот файл создает или сам ВП или Ранк СЕО мат. Почему, они создают с ошибкой так и не понял, но ошибку исправил. Но у меня есть один самописный сайт. С ним вообще чудеса. В корневой папке лежит файл, в нем 3 строки. А Яндекс и поиск показывают 7 строк. Почему так?
Юрий, если позволите р реплика: вот потому только фреймворки или самописы - они делают только то и только так, что в них было вложено - ну, а если и бывают косяки по незнанию или кривых ручек, то они также элементарно и просто устраняются.
И да - если написать на известных фреймворказ, типа tiu, karavelo, simfony, codignitera и т.д. и т.п., то с поддержкой, ценой и прочим проблем будет не больше, чем с вп и прочими пакетниками.
Хотя и есть пакетники, близкие по характеристикам) к фреймворкам)

Рисунок
Чудес не бывает! Значит где то что есть еще. Не видя картины можно только гадать.
Путь по ссылке https://www.undora.ru/robots.txt
Показывает Яндекс [SIZE=1]User-agent: *[/SIZE][SIZE=1]Disallow: /index[/SIZE]
[SIZE=1]Disallow: /*galleries/?page=[/SIZE]
[SIZE=1]Disallow: /*video/?page=[/SIZE]
[SIZE=1]Allow: /*galleries/?page=1[/SIZE]
[SIZE=1]Allow: /*galleries/?page=2[/SIZE]
[SIZE=1]Allow: /*galleries/?page=3[/SIZE]
[SIZE=1]Host: www.undora.ru[/SIZE]

[SIZE=1]Sitemap: https://www.undora.ru/sitemap.xml[/SIZE]
В корневой папке [SIZE=1]User-agent: *[/SIZE]
[SIZE=1]Disallow:[/SIZE]

[SIZE=1]Sitemap: https://www.undora.ru/sitemap.xml[/SIZE]
А как картинки вставлять?
Кстати по теме у меня в подписи на хостинге есть такая функция по созданию роботс тхт
Цитата
WGN пишет:
Кстати по теме у меня в подписи на хостинге есть такая функция по созданию роботс тхт

У меня с этим нет проблем. И ВП создает и RM. Просто они разные создают. Хотел узнать, какой самый оптимальный
Цитата
Юрий пишет:
А как картинки вставлять

Куда? В роботс?
Цитата
Серёжка пишет:
Куда? В роботс?
Здесь, на форуме
Цитата
Юрий пишет:
Здесь, на форуме

Вы хотите редактировать роботс cypr?
Хочу картинки вставлять в сообщения
Цитата
Юрий пишет:
Хочу картинки вставлять в сообщения
Думаю, ссылка "прикрепить картинку" в форме отправки сообщения Вам поможет.
Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
21:29 Без просмотра рекламы к контенту не пустят? AdSense вводит Offerwall для всех 
20:54 Claude по паспорту + апдейт Яндекса 17 апреля - у кого что по выдаче 
20:37 Claude Design - ИИ, который сам делает дизайн (прототипы, лендинги, слайды). Кто-нибудь уже смотрел? 
17:24 Ап выдачи Яндекса 8 апреля - есть движение, но интереснее что творится с AI-ответами Google 
17:10 ИКС Яндекс АПдейт 1 апреля 2026. Обновлён алгоритм расчёта 
16:59 Google начал жёстко давить за манипуляции + апдейт Яндекса 16 апреля - у кого что изменилось 
16:56 Голод на биржах: Всё приличное уже выкуплено. Куда нести остатки бюджета? 
20:38 CryptoMonitor.info - ваш надеждный обменник BTC USDT XMR (без KYC) 
18:56 Sphera | круглосуточный обмен, наличные 
18:11 Phoenix - Выгодный обмен электронных валют, без верификации 
17:05 Trustpilot Reviews | Подниму рейтинг вашей компании 
17:00 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод 
16:58 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата 
16:55 Установка|Настройка|Доработка|Наполнение сайтов|Дизайн|3D|Видеомонтаж 
22:00 Точные прогнозы на футбол 
21:08 Подтягиваем физкультурку 
16:33 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
16:29 С юмором по жизни! 
16:24 Всех с праздником! 
22:41 Ставки на супер тренды в спорте 
12:47 Добро пожаловать в цифровой мир...