неплохой скриптик!

уберите все кроме 
admin

embed.php

embed/

з.ы. может кто-то скажет больше, но .swf это сам плейер, а .php надо внутрь глянуть - это по ходу файлы самого движка

Disallow: /jwplayer.swf
Disallow: /player.swf
Это плееры запрещённые к индексации , если видео вставлено ссылками в модуль плеера = запрещено ))

Disallow: /admin/ вход в админку можно оставить закрытым

Disallow: /embed.php
Disallow: /embed
Disallow: /relatedclips.php = смотреть сам сайт надо (рубрики, страницы или что так обозвали)
Disallow: /fpembed.php
Disallow: /drelated.swf
Disallow: /yt.swf

Админка разумеется ENG, да и смысла ее рус нету... Я ваще не понял что мне с роботс делать если честно. Хочу что бы индексировалось все. Как быть то? Если честно не чего не понял что вы тут мне написали. Можно ссылки на аналогичные как вы писали сайты на данной кмс? 

вчера поставил себе на хост, движок крутит нормально, с трубы тащит по ключам сколько угодно.
в описании сказано что может с 38 сайтов грабить, а по факту только ютюб.
это по ходу в платной версии 38 каналов грабаинга?

Цитата
Константин пишет: Вы меня запутали. Выложите кто нибудь уже готовый файл

вот для теста залил на поддомен - чутка грабанул - смотреть тут
файл роботс сделать таким (у самого еще руки не дошли)

Код
User-agent: * Disallow: /admin/ /*админская часть скрипта Disallow: /relatedclips.php /*отвечает за прошлые новости - возможно если убрать появятся дубли Disallow: /fpembed.php /*х\з че это Disallow: /embed.php /*файл создающий ембед код Disallow: /embed/ /*сам ембед код

Цитата
Константин пишет: Спасибо попробую.

собственно ничего так и не поменяв в роботсе, решил сегодня проверить - что там по выдаче.
итог на скрине - могу только добавить, что оставить роботс можно пока в первозданном ввиде (это не ДЛЕ с его кучей дублей) а добавить строчку:

Код
Disallow: /watch.php?*  /*это скрипт формирующий embed код (единственное сомнение - это необходимость {?*} )

хотя  watch - смотреть  

подождем еще чуток - по двум местам в выдаче судить сложновато:rolleyes:

да, в яше пока глухо