Категории

вопрос - вопросов!?

robot.txt создается при установки шопса.
зачем там запрещен news.php и sitemap (инфо страницы ID=)?
кто нить может объяснить ???

Главное - товары. Почему контент страница запрещена, понятно - для ботов есть специально сформированная карта сайта.
Новости - тоже, думаю, незачем. У меня с RSS источника забирается, ни к чему эти страницы индексировать.
Вам, если так уж горит, следует убрать директиву.

tulgha Hi!
тока не понятно, любая новость, или сылки на нее а еще и с кратким описанием,
как ни как но вес имеет. rss - понятно, но rss источник как источник , контента и сылок хиловат хоть и полезен.
вопрс зачем, идея то была!?
вопрос наверно больше к Eugen.....
я не php'шник и воще ни кто в сайтосоздательстве и продвижении, хотя программист и не
самый плохой в своей сфери, вот и хочется понять!?

указать чпу для новостей, статей
и скормить xml map поисковику

должно проиндексироваться

Источник