Кто напишет правильный робот.тхт

Иван Бобко

Сообщений: 444 Регистрация: Сен 2011

24 Декабря 2014 23:05

Кто напишет правильный робот.тхт для сайта на ДЛЕ. Связь в ЛС. За вознаграждение.

Изменено: Иван Бобко - 24 Декабря 2014 23:38

Биржа прямой рекламы — Сollaborator
Push-уведомление поможет вернуть посетителей на сайт

Василий Шишкин

Сообщений: 291 Регистрация: Авг 2014

24 Декабря 2014 23:38

Цитата
Иван Бобко пишет: Кто напишет правильный робот.тхт для сайта. Связь в ЛС. За вознаграждение.

Сегодня вроде не пятница. Гугл в помощь и ручки...

Лучший хостинг от 159 рублей с дата центром в Москве!
Здесь продают и покупают абсолютно любой трафик
Самая прибыльная тизерка

Дивергент

Сообщений: 22497 Регистрация: Май 2011

25 Декабря 2014 00:00

Цитата
Иван Бобко пишет: Кто напишет правильный робот.тхт для сайта на ДЛЕ

Вы озвучьте для начала всем, чем Вас генерируемый двигом не устраивает.

Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.

djinn

Сообщений: 84 Регистрация: Ноя 2013

8 Января 2015 10:20

Если актуально, пишите в личку, помогу.

Создание и оптимизация сайтов на DLE

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

8 Января 2015 10:25

Код

User-agent: * 
Disallow: /*print 
Disallow: /autobackup.php 
Disallow: /user/
Disallow: /admin.php 
Disallow: /favorites/ 
Disallow: /index.php?do=register 
Disallow: /?do=lastcomments 
Disallow: /statistics.html 
Disallow: /link/
Disallow: /rules.html 
Disallow: /index.php?do=feedback 
Disallow: /index.php?do=rules 
Disallow: /cgi-bin/
Disallow: /templates/
Disallow: /engine/
Disallow: /languages/
Disallow: /tags/
Disallow: /page/
Disallow: */page/
Sitemap: http://_сайт.ru/sitemap.xml

User-agent: Yandex 
Disallow: /*print 
Disallow: /autobackup.php 
Disallow: /user/
Disallow: /link/
Disallow: /admin.php 
Disallow: /favorites/ 
Disallow: /index.php?do=register 
Disallow: /?do=lastcomments 
Disallow: /statistics.html 
Disallow: /rules.html 
Disallow: /index.php?do=feedback 
Disallow: /index.php?do=rules 
Disallow: /cgi-bin/
Disallow: /templates/
Disallow: /engine/
Disallow: /tags/
Disallow: /page/
Disallow: */page/
Disallow: /languages/
Host: _сайт.ru
Sitemap: <a href=\"http://_сайт.ru/sitemap.xml\" target=\"_blank\">http://_сайт.ru/sitemap.xml</a>

Вот такой у меня на всех сайтах стоит.

Товарные тизеры - от 3 рублей/клик | Стабильный хостинг от 90 рублей

Lawyer

Модератор

Сообщений: 8460 Регистрация: Апр 2010

8 Января 2015 12:18

Помню как то поднимался такой вопрос, но роботс для ДЛЕ:

Цитата
User-agent: * Disallow: /engine/ Host: Sitemap:

, но это не всё.

- Вечные ссылки

- Акция 2025: Забери до 5 090 руб. в одни руки

- Размещение ссылок, прогоны. БОЛЬШИЕ СКИДКИ!

Новые темы	Объявления	Свободное общение
11:07 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 06:34 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 01:09 Yahoo Scout: Нейро-привет из склепа. Реальный шанс на траф или мимо? 17:33 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 15:14 Апдейт Яндекса 7 февраля. Пока серп трясет, некоторые по ботам плачут 15:10 Google Discover Core Update: Дискавер отделяют от поиска? 11:30 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией?	18:27 Nexulume.com Обменник без AML и KYC 15:45 Mixmasters - Exchange without AML and KYC 10:22 Swapwatch.org — Мониторинг криптовалютных обменников 10:19 SwapPix.io - быстрый и безопасный обменник криптовалют. 15:12 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 12:38 Bankomat001 - Сервис обмена электронных валют 10:42 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру	00:28 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 23:44 Точные прогнозы на футбол 18:34 Ставки на супер тренды в спорте 15:30 Гильотина для классиков: Клод доедает физические книги 11:10 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко

Новые темы

Объявления

Свободное общение

11:07 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?
06:34 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках
01:09 Yahoo Scout: Нейро-привет из склепа. Реальный шанс на траф или мимо?
17:33 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов
15:14 Апдейт Яндекса 7 февраля. Пока серп трясет, некоторые по ботам плачут
15:10 Google Discover Core Update: Дискавер отделяют от поиска?
11:30 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией?

18:27 Nexulume.com Обменник без AML и KYC
15:45 Mixmasters - Exchange without AML and KYC
10:22 Swapwatch.org — Мониторинг криптовалютных обменников
10:19 SwapPix.io - быстрый и безопасный обменник криптовалют.
15:12 CryptoGraph — Анонимный обмен криптовалют без KYC и AML
12:38 Bankomat001 - Сервис обмена электронных валют
10:42 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру

00:28 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе
23:44 Точные прогнозы на футбол
18:34 Ставки на супер тренды в спорте
15:30 Гильотина для классиков: Клод доедает физические книги
11:10 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось?
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес
13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко

09.07.2017 09:09	Подскажите правильный ли Robots
02.04.2017 15:13	https на DLE - правильный редирект в файле .htaccess
21.05.2016 10:45	Какой {title} будет правильный в названии материала?
30.06.2014 09:11	Правильный doctype
16.02.2014 00:01	Подскажите правильный robots для DLE