спасибо, за толковые ответы.
интересует меня еще 1 вопрос. я поставил блог вот сюда (условно)
www. domain. com/blog/
вопрос: как показать гуглу, открыть папку /blog/ для индексации. через robots.txt ? или как-то иначе?
через robots.txt можно только запрещать к индексации (и то это будет на усмотрение поисковика)
и вообще странный вопрос, корень домана поисковики тоже не побегут индексировать просто так
через robots.txt можно только запрещать к индексации (и то это будет на усмотрение поисковика)
и вообще странный вопрос, корень домана поисковики тоже не побегут индексировать просто так
странно, наряду с Disallow: /bla-bla/ есть еще и Allow: /bla-bla/ хотя я могу и ошибаться.
а вообще корень домаина уже в выдаче. просто я посмотрел через фпт структуру и там много всяких папок. странно что их не цепляет поисковик. папка с блогом среди них. вот и переживаю, зацепит ли ее. начал проспам легенький, авось поможет.
спасибо за ответы.
странно, наряду с Disallow: /bla-bla/ есть еще и Allow: /bla-bla/ хотя я могу и ошибаться.
а вообще корень домаина уже в выдаче. просто я посмотрел через фпт структуру и там много всяких папок. странно что их не цепляет поисковик. папка с блогом среди них. вот и переживаю, зацепит ли ее. начал проспам легенький, авось поможет.
спасибо за ответы.
Allow работает как исключение просто
Допустим так:
Disallow: /
Allow: /blog/