Правильно ли составлен robots.txt?
Страницы: 1
Правильно ли составлен robots.txt?
Всем привет! Посмотрите, пожалуйста, мой robots.txt. Правильно ли он составлен? Я его поставил на сайт около двух недель назад, а ссылки типа:"Материалы за 1998 год" из поиска не пропали. Может, я не правильно составил его или нужно подождать ещё?
Код
User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /tags/
Disallow: /page/
Disallow: */page/*
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /backup/
Disallow: /admin.php
Disallow: /engine/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /*do=search
Disallow: /pravoobladatelyam.html
Disallow: /2014/
Disallow: /1996/
Disallow: /1997/
Disallow: /1998/
Disallow: /1999/
Disallow: /2000/
Disallow: /2001/
Disallow: /2002/
Disallow: /2003/
Disallow: /2004/
Disallow: /2005/
Disallow: /2006/
Disallow: /2007/
Disallow: /2008/
Disallow: /2009/
Disallow: /2010/
Disallow: /2011/
Disallow: /2012/
Disallow: /2013/
Host: kinolike.net
Sitemap: <a href=\"http://kinolike.net/sitemap.xml\" target=\"_blank\">http://kinolike.net/sitemap.xml</a>
Ребят, ну, посмотрите, пожалуйста
Изменено: Alex - 10 Октября 2014 22:56
smile:) подождите еще, вылетят из поиска.
Фриланс нового поколения. Всё от 500 рублей.

Вечные ссылки и статьи - за полцены
Надеюсь, что вылетят! В яндексе такой фигни нет! Однака ссылка правообладателям в поиске есть, хотя я ее закрыл. А сколько ждать?
Код
Disallow: /2015/
еще добавь, уже скоро
Цитата
Alex пишет:
Надеюсь, что вылетят! В яндексе такой фигни нет

Если про гугл, сам удали страницы в ВМ
Код
Sitemap: <a href=\"http://kinolike.net/sitemap.xml\" target=\"_blank\">http://kinolike.net/sitemap.xml</a> 
Впервые вижу такое в txt файле smile:confused:
Изменено: SynyAlex - 11 Октября 2014 05:52
SynyAlex, так ссылку сам cy-pr переделал. Я удалял их через панель в гугл, они снова появились
Цитата
Alex пишет:
Host: kinolike.net
Эту директиву нужно указывать только для яндекса и лучше отдельно, тк он любит, когда к нему обращаются персонально.То есть ниже всего этого добавляете 
Код
User-agent: Yandex 
Host: ваш_сайт  
Sitemap: htt_p://ваш сайт.net/sitemap.xml
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
13:31 Хватит ныть про смерть сайтов и нейроответы - почему мы всё еще в деле 
12:02 Раскрутка форума 
06:35 В Яндексе позиции держатся, а трафик проседает - стало заметно сильнее 
23:47 ИКС Яндекс АПдейт 1 апреля 2026. Обновлён алгоритм расчёта 
23:28 Бегун обманщик 
23:14 Сеть контекстной рекламы 
23:05 Лучший аналог бегуна есть ли ? 
11:27 Прокси IPv6 Россия 
10:07 продам один НН Аккаунт . МОЙ ЛИЧНЫЙ аккаунт на HeadHunter 
09:37 Onechange.me — надежный обменник криптовалют и фиатных средств 
08:47 Swapwatch.org — Мониторинг криптовалютных обменников 
08:10 HH.ru Работадателя вериф 
01:43 SOCKS5 приватные прокси на 30 дней для PayPal 
01:43 Google Voice аккаунты для бесплатных SMS и звонков 
11:50 Во Франции начали штрафовать за IPTV - до 300-400 евро уже прилетает обычным пользователям 
11:41 "Вымпелком" предложил белые списки для части абонентов - выборочный интернет вместо полного доступа 
11:22 А вы бегаете? 
11:21 Список обновленных тем пуст... 
06:59 Добро пожаловать в цифровой мир... 
20:56 Точные прогнозы на футбол 
19:55 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила