Яндекс гонит!
Страницы: 1
Яндекс гонит!
Два дня не заходил в Яндекс.вебмастер, сейчас захожу смотрю информацию о сайте, а там!Страниц в поиске 56
Внешних ссылок на страницы сайта 63
Дата последнего посещения сайта роботом 4.08.2013
Загружено роботом 161
ИСКЛЮЧЕНО РОБОТОМ  97
Самое смешное два дня назад всего одна страница была и то потому что в robots.txt запрещена была.Нажимаю по ссылке что бы увидеть что за страницы исключены, а там ресурс не найден ошибка 404 (см картинку), где зачеркнуто красным там мое мыло, и так четыре листа ссылок, какого хрена оно вообще стало туда подставляться в УРЛ'ы я хз, кто знает как бороться, движок вордпрес.P.S. гугл такого не выдал, как было 58 проиндексировано страниц, так и осталось.
12213.jpg (90.02 КБ) [ Скачать ]
Изменено: Максим Меркулов - 6 Августа 2013 14:18
А почему у Вас disallow на архив не настроен, это же дубли?
Вы об этом (картинка)?
в роботс вот все что еще приписано
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comment/
Disallow: /tag/
Disallow: /author/
Disallow: /search/
Disallow: /rss/
Disallow: /*.js
Disallow: /*.inc
Disallow: /*.css
Disallow: /*?
Disallow: /*.gz
1212133.jpg (23.17 КБ) [ Скачать ]
Я про

Код
Disallow: /2013


и запрет индексации архивов за другие годы...
Цитата
WSairus пишет:
Я про
Код
 Disallow: /2013 


и запрет индексации архивов за другие годы...
Цитата
ну это я щас сижу добавляю, меня больше всего интересует, с какого перепуга на концах URL появился мой e-mail
если вставить в robots.txt Disallow: /*/my_email@gmail.com, прокатит ли с тем что яндексу будет запрещено индексировать страницы которые кончаются на мое мыло?
Максим Меркулов, скажу по секрету - через AddUrl можно добавить любую страницу отдающую код 200 и не запрещенную к индексации. По поводу мыла - достаточно запретить архивы, хотя можете и подстраховаться.
Цитата
WSairus пишет:
Максим Меркулов, скажу по секрету - через AddUrl можно добавить любую страницу отдающую код 200 и не запрещенную к индексации. По поводу мыла - достаточно запретить архивы, хотя можете и подстраховаться.


WSairus, Спасибо, я закрыл и архивы и мыло, посмотрим что дальше будет
Максим Меркулов, дык в вебмастере Я и проверь, разрешены ли они после этого к индексации или нет. Там же есть проверка роботса. И как выше сказали, действительно достаточно просто архивы закрыть.
Даня Бондарчук, проверил, если просто Disallow: /2013/ то если есть мыло все равно где то да проскакивает, так что я и с мылом тоже поставил
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
10:45 Старые кости или свежее мясо? Как нагнуть старичка в серпе за один год 
10:27 Google - шантажист, а Cloudflare - не спаситель. Как не отлететь в бан 
20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 
20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 
20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
18:53 Кнопки "скрыть" и "пожаловаться" в рекламе яндекса 
15:29 OpenAI и шейхи: Цензура на продажу и "гибкие" идеалы амеров 
09:05 Swapwatch.org — Мониторинг криптовалютных обменников 
08:45 GhostRocket.pro — Взлетаем в новую эру криптообмена! 
04:13 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
00:01 E-currency.exchange — ваш помощник в мире обменов 
23:40 Monitex: Мониторинг с кэшбэком 80% в USDT 
22:35 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
18:41 Веривикация Авито 
09:52 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
03:45 Гильотина для классиков: Клод доедает физические книги 
01:24 Точные прогнозы на футбол 
21:04 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 
19:29 FIFA и Assassin’s Creed воруют пароли: В репаки зашили лютый стиллер. Чекаем логи 
19:24 Туалетные секреты: Замурчательная тема 
19:15 Сайты Рунета