А для кого/чего собственно создается роботс?

А для кого/чего собственно создается роботс?, гугл кладет больт на роботс

Сообщений: 588 Регистрация: Янв 2018

10 Июня 2018 12:15

Есть небольшой раздельчик на сайте, который не вписывается в концепцию сайта и закрыт в роботс. Все как-то руки не доходят его удалить. Когда-то спамил где попало ссылки на страницу раздела и теперь есть трафик 1-2 посетителя неизвестно откуда. Седня смотрю в серчконсоль - закрытая от индекса страница нен-нет да и показывается гошей и висит сообщение мол ошибка сканирования, страница закрыта в роботсе, но мы всеравно ее проиндексировали, исправьте роботс!
Вот как это понимать? Гоша сам создает инструкции для закрытия страниц от индекса и сам же кладет на них болт! И что интересно, не могу понять откуда переходы, вебвизор показывает прямые заходы.
Так-то мелочь, но бесит!

Хватит ерундой страдать на SEO
ИДИ пахать на буксы
БЕСПЛАТНЫЙ ХОСТИНГ на 30 дней

Coder

Сообщений: 10174 Регистрация: Мар 2013

10 Июня 2018 13:21

Робота есть рекомендательная инструкция.

Закрывайте в мета.

✓ Проверенные скрипты и полезности для сайта

✓ Курсы

✓ Сервис временных ссылок

Сергей

Сообщений: 291 Регистрация: Июн 2014

10 Июня 2018 15:35

Тоже в этом плане Гугл бесит, пихает все без разбора, а потом сам же и жалуется:). Можно также через консоль ее удалить/скрыть.

Eye

Сообщений: 21210 Регистрация: Май 2011

10 Июня 2018 16:20

Цитата
Сергей пишет: пихает все без разбора, а потом сам же и жалуется

Шурыгина чёт вспомнилась...

Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.

Сергей

Сообщений: 291 Регистрация: Июн 2014

10 Июня 2018 16:40

Цитата
Eye пишет: Шурыгина чёт вспомнилась...

Ахаха, тонко)

SEO BOSS

Сообщений: 5778 Регистрация: Апр 2016

14 Июня 2018 19:15

Цитата
Сергей пишет: Тоже в этом плане Гугл бесит, пихает все без разбора, а потом сам же и жалуется:). Можно также через консоль ее удалить/скрыть.

Странно, у меня ничего не вылазит (если запрещаю, то не индексится) smile:D

Почему завистники всегда чем-то огорчены? Потому что их снедают не только собственные неудачи, но и успехи других.

video-freelancer

Сообщений: 2803 Регистрация: Авг 2012

15 Июня 2018 00:21

Если сайт в гугле на переобход ставите гугло бот определится как пользователь с прямым заходом, со 100% отказом

Купить авиабилеты онлайн дешево | Аренда Серверов Дешево https://clck.ru/afhGc Выделенные СЕРВЕРЫ - БЕСПЛАТНЫЕ плюшки https://clck.ru/YhkZe 🖧 / / Хостинг от 6руб в день! https://clck.ru/Rk2P5 Хостинг - Скидки при

WGN

Сообщений: 9848 Регистрация: Июн 2015

15 Июня 2018 11:47

Ну для кого яндекс важнее то и роботс соответственно

✔(НЕЙРОСЕТЬ) Качественные живые посетители на ваш сайт, блог, канал — Бесплатно!!!

♛ЛУЧШИЙ ПРОВЕРЕННЫЙ и САМЫЙ НЕДОРОГОЙ ХОСТИНГ: АКЦИИ!

Alex

Сообщений: 41 Регистрация: Июн 2013

15 Октября 2018 14:49

К сожалению, даже в справке гугла есть пункт, "Если на страницу заходят/ссылаются, то даже закрытие в роботс не гаранитрует не попадание в индекс". На моей памяти миниум 3 случая, когда приходилось позже удалять urls из выдачи, с помощтю инструмена гугл.

Портал о работе и бизнесе.

Krol

Сообщений: 9666 Регистрация: Сен 2012

#10

15 Октября 2018 21:18

А что если метатегами закрывать индекс? через тот же донбот, вроде как одно из лучших решений.

Продвижение, Аудит, Оптимизация сайтов.

Федор Рашпиль

Сообщений: 588 Регистрация: Янв 2018

#11

16 Октября 2018 03:06

Метатеги да, пока еще работают, боты ПС боятся их как черт ладана. smile:sarc:

DYAVOL_no_DOBRIY

Сообщений: 2 Регистрация: Окт 2018

#12

16 Октября 2018 08:51

Робот не часто выплывает

Lissa Draaa

Сообщений: 2 Регистрация: Янв 2019

#13

2 Января 2019 12:27

Ахаха, [FONT=Tahoma, Arial, Helvetica, sans-serif]Это очень весело[/FONT]

Артем Малков

Сообщений: 725 Регистрация: Апр 2011

#14

2 Января 2019 17:19

Вот тут есть информация по запрету на индексирование страниц - https://www.pandoge.com/stati_i_sovety/udalyaem-stranicu-ili-razdel-sayta-s-poiska-google

Самый быстрый хостинг на SSD. Месяц в подарок. Поддержка 24/7. Помощь в переезде.

Передовое сообщество вебмастеров. Тебе к нам!

Eye Сообщений: 21210 Регистрация: Май 2011	#15 2 Января 2019 18:01 Артем Малков, Вас, по всей видимости, Coder покусал... Он тут несколько лет спамил своим сайтом в каждой теме, теперь Вы эстафету переняли?

Похожие темы:

22.02.2021 15:45	Проблемы от высокого CLS и как их исправить
28.02.2018 13:32	Кого бесит выдача в Гугл?
09.06.2016 07:08	А чего все молчат?
10.03.2016 15:05	От гугла вообще никакого PR нет!
10.12.2015 12:01	Из за чего просели позиции

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
21:10 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 16:39 Партнерская программа OWNR WALLET 16:34 Очень много 404 ошибок в вэбмастере!? 15:11 Adtrafico - Правильная партнёрская сеть под бурж трафик 03:48 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 22:55 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 21:18 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам).	17:08 TELEGRAM SOFT Gods\Expert - Многоцелевой комбайн по работе с телеграмм 16:44 Сервис валидации e-mail баз 16:09 Прием платежей для HIGH RISK \| Прием платежей без сайта 16:09 Услуги рассылки Viber\|Whatsapp\|IMO. 16:09 Услуги рассылки Вконтакте 16:08 Рассылка в TELEGRAM \|Большой опыт работы \| Любые тематики \| Лучшая конверсия 12:41 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc	02:53 Точные прогнозы на футбол 20:22 Как получить рефералов и посетителей на сайт бесплатно. 18:31 Видимо, похороны СУПРа уже прошли как-то по-тихому 12:48 Каспкрски ОС 11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 14:41 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок 15:24 Добро пожаловать в цифровой мир...