phpbb + дубли страниц = фильтр! - думаю не первый кто с этим мучается - огромное количество не нужных страниц - что с ними делать?
Страницы: 1
phpbb + дубли страниц = фильтр! - думаю не первый кто с этим мучается - огромное количество не нужных страниц - что с ними делать?
поставил phpbb3, прописал в роботсе все системные папки чтобы поисковики их не читали и тут при анализе сайта огромное количество топиков которые и не нужны в выдаче + их дубли тоже не нужные. при автоматическом составлении сайтмап он находит аж 49 999 страниц:eek: вот что с ним делать? так и фильтр от ПС поймать можно на раз два, даже до три не дойдет а ты уже под фильтром! не знаю уже что с ним делать! куча страниц viewforum.php?..... и всяких левых! очень, очень прошу помощи!
за 5 у.е. скину роботс.тхс, который у вас должен быть, где прописаны все адреса, которые надо запретить для гугла и яндекса
Изменено: limion - 1 Октября 2013 21:52
сильно отличается от этого? 
User-agent: *Disallow: /faq.php
Disallow: /mcp.php
Disallow: /memberlist.php*
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /viewtopic.php?p=*
Disallow: /viewtopic.php?f=*&t=*&start=0$
Disallow: /viewtopic.php?f=*&t=*&view=next
Disallow: /viewtopic.php?f=*&t=*&view=previous
Disallow: /memberlist.php*
Disallow: /ucp.php*
Disallow: /viewonline.php
Disallow: /adm/index.php
Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid /viewtopic.php

User-agent: Yandex
Disallow: /faq.php
Disallow: /mcp.php
Disallow: /memberlist.php*
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /memberlist.php*
Disallow: /ucp.php*
Disallow: /viewtopic.php?p=*
Disallow: /viewtopic.php?f=*&t=*&start=0$
Disallow: /viewtopic.php?f=*&t=*&view=next
Disallow: /viewtopic.php?f=*&t=*&view=previous
Disallow: /viewonline.php
Disallow: /adm/index.php
Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid /viewtopic.php
ок в роботе будут прописаны все страницы которые им не стоит читать, учитывая то, что поисковики все равно только со стороны смотрят на роботс ткст какой толк? был бы у Вас скрипт или мод который сам склеивает дубли и при этом не нагружает поисковики для просмотра одних и тех же страниц я бы подумал. знаю то, что гугл очень не любит дубли и роботс не гарантирует то, что поисковик не будет читать эти дубли - именно этого мне и надо, чтобы поисковик вообще не читал дубли и сам их не клеил. было бы здорово если бы у Вас был мод который сам определяет оригинал страницы и занимается этим: <link rel="canonical" ..............
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
16:04 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 
11:48 Google - шантажист, а Cloudflare - не спаситель. Как не отлететь в бан 
11:47 Старые кости или свежее мясо? Как нагнуть старичка в серпе за один год 
11:45 10.02 Яндекс штормит, а Google лезет в долги: 15 миллиардов на железки для ИИ 
20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 
20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 
20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
20:15 Nexulume.com Обменник без AML и KYC 
17:47 Продажа аккаунтов HH.RU 
17:06 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 
16:53 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно 
12:59 Mixmasters - Exchange without AML and KYC 
09:05 Swapwatch.org — Мониторинг криптовалютных обменников 
08:45 GhostRocket.pro — Взлетаем в новую эру криптообмена! 
21:50 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 
21:25 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 
20:54 Туалетные секреты: Замурчательная тема 
17:44 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
15:24 Сайты Рунета 
15:22 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 
03:45 Гильотина для классиков: Клод доедает физические книги