Яндекс гонит!
Страницы: 1
Яндекс гонит!
Два дня не заходил в Яндекс.вебмастер, сейчас захожу смотрю информацию о сайте, а там!Страниц в поиске 56
Внешних ссылок на страницы сайта 63
Дата последнего посещения сайта роботом 4.08.2013
Загружено роботом 161
ИСКЛЮЧЕНО РОБОТОМ  97
Самое смешное два дня назад всего одна страница была и то потому что в robots.txt запрещена была.Нажимаю по ссылке что бы увидеть что за страницы исключены, а там ресурс не найден ошибка 404 (см картинку), где зачеркнуто красным там мое мыло, и так четыре листа ссылок, какого хрена оно вообще стало туда подставляться в УРЛ'ы я хз, кто знает как бороться, движок вордпрес.P.S. гугл такого не выдал, как было 58 проиндексировано страниц, так и осталось.
12213.jpg (90.02 КБ) [ Скачать ]
Изменено: Максим Меркулов - 6 Августа 2013 14:18
А почему у Вас disallow на архив не настроен, это же дубли?
Вы об этом (картинка)?
в роботс вот все что еще приписано
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comment/
Disallow: /tag/
Disallow: /author/
Disallow: /search/
Disallow: /rss/
Disallow: /*.js
Disallow: /*.inc
Disallow: /*.css
Disallow: /*?
Disallow: /*.gz
1212133.jpg (23.17 КБ) [ Скачать ]
Я про

Код
Disallow: /2013


и запрет индексации архивов за другие годы...
Цитата
WSairus пишет:
Я про
Код
 Disallow: /2013 


и запрет индексации архивов за другие годы...
Цитата
ну это я щас сижу добавляю, меня больше всего интересует, с какого перепуга на концах URL появился мой e-mail
если вставить в robots.txt Disallow: /*/my_email@gmail.com, прокатит ли с тем что яндексу будет запрещено индексировать страницы которые кончаются на мое мыло?
Максим Меркулов, скажу по секрету - через AddUrl можно добавить любую страницу отдающую код 200 и не запрещенную к индексации. По поводу мыла - достаточно запретить архивы, хотя можете и подстраховаться.
Цитата
WSairus пишет:
Максим Меркулов, скажу по секрету - через AddUrl можно добавить любую страницу отдающую код 200 и не запрещенную к индексации. По поводу мыла - достаточно запретить архивы, хотя можете и подстраховаться.


WSairus, Спасибо, я закрыл и архивы и мыло, посмотрим что дальше будет
Максим Меркулов, дык в вебмастере Я и проверь, разрешены ли они после этого к индексации или нет. Там же есть проверка роботса. И как выше сказали, действительно достаточно просто архивы закрыть.
Даня Бондарчук, проверил, если просто Disallow: /2013/ то если есть мыло все равно где то да проскакивает, так что я и с мылом тоже поставил
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
20:05 С чего сейчас проще начать? 
18:58 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов? 
18:49 Биржи ссылок в 2026 - реально ли новичку с одним сайтом поднять копейку? 
18:46 Гугл запустил Первый АПдейт года и серп уже трясёт - Google March 2026 Core Update 
13:09 Выбор CMS для первого блога в 2026 - реально ли новичку войти без кода? 
12:47 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика 
12:33 APK на паузе. Google убивает быстрый конверт 
20:37 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
19:58 SpeedyIndex - ускорение индексирования ссылок в Google. 100 ссылок в подарок. 
14:11 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
09:40 Вериф аккаунты АВИТО + платежи 
09:22 Софт для рассылки в телеграм 
09:16 Telegram-бот конструктор: автоответы, воронки, поддержка и т.д 
00:05 TETChange-Обменник криптовалют 
18:19 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 
18:11 Голландцы влепили Grok по яйцам - теперь нельзя раздевать реальных людей, штраф 100к евро в день 
13:04 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 
18:49 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 
17:05 Огородники 
13:02 С юмором по жизни! 
05:10 Точные прогнозы на футбол