Форум успешных вебмастеров - GoFuckBiz.com

  Форум успешных вебмастеров - GoFuckBiz.com > Бизнес-решения > Поисковые системы
Дата
USD/RUB58.6530
BTC/USD0.0000
Поисковые системы Поисковая оптимизация под Google, Yahoo, Bing и т.д.

Закрытая тема
Опции темы Опции просмотра
Старый 26.10.2010, 10:35   #1
ng-gr
ух
 
Аватар для ng-gr
 
Регистрация: 01.12.2009
Сообщений: 123
Бабло: $30965
По умолчанию Disallow

Наблюдаю в выдаче страницы бонусника, которые по идее не должны индекситься (в Disallow), в выдаче только титлы.
Как удаётся загнать в индекс такие страницы?
ng-gr вне форума  
Старый 26.10.2010, 11:15   #2
Maximus325
Технодаун
 
Аватар для Maximus325
 
Регистрация: 11.05.2007
Сообщений: 10,043
Бабло: $1443960
По умолчанию

С какого перепугу Disallow не должны индекситься?
__________________
ноу криминалити ин раша
Maximus325 на форуме  
Старый 26.10.2010, 11:40   #3
bablolover
Senior Member
 
Аватар для bablolover
 
Регистрация: 10.10.2010
Сообщений: 1,060
Бабло: $126610
По умолчанию

потому что disallow для того, чтобы туда боты не ходили
__________________
покупаю худеющий ру-траф в любых кол-вах
стоимость смс на номер
bablolover вне форума  
Старый 26.10.2010, 11:49   #4
Maximus325
Технодаун
 
Аватар для Maximus325
 
Регистрация: 11.05.2007
Сообщений: 10,043
Бабло: $1443960
По умолчанию

Это где такое сказано?)
__________________
ноу криминалити ин раша
Maximus325 на форуме  
Старый 26.10.2010, 12:05   #5
nobody0
Мастер
 
Аватар для nobody0
 
Регистрация: 04.04.2007
Адрес: sweet home
Сообщений: 265
Бабло: $39823
По умолчанию

тут был тупняк про rel="nofollow"
__________________
Seo Блог | Создание сайтов | Продвижение сайтов. Работа по белому и без пустых гарантий.
nobody0 вне форума  
Старый 26.10.2010, 12:06   #6
bablolover
Senior Member
 
Аватар для bablolover
 
Регистрация: 10.10.2010
Сообщений: 1,060
Бабло: $126610
По умолчанию

в любом факе?
http://ru.wikipedia.org/wiki/Robots.txt

то что роботы хуй забивают это другой вопрос. но изначально директива то для блокировки
она и в RFC поди так прописана, а гугль кладёт болт на RFC?
у меня по логам доров бот не ходит в disallow, щас проверил
__________________
покупаю худеющий ру-траф в любых кол-вах
стоимость смс на номер
bablolover вне форума  
Старый 26.10.2010, 12:07   #7
mr. werewolf
Bonjour messieurs
 
Аватар для mr. werewolf
 
Регистрация: 22.02.2008
Адрес: Сыктывкар
Сообщений: 6,478
Бабло: $1266619
Отправить сообщение для mr. werewolf с помощью ICQ
По умолчанию

Цитата:
Сообщение от Maximus325 Посмотреть сообщение
Это где такое сказано?)
Ну, тут вродь как :
http://www.google.com/support/webmas...&answer=156449
mr. werewolf вне форума  
Старый 26.10.2010, 12:12   #8
nobody0
Мастер
 
Аватар для nobody0
 
Регистрация: 04.04.2007
Адрес: sweet home
Сообщений: 265
Бабло: $39823
По умолчанию

Цитата:
Сообщение от bablolover Посмотреть сообщение
в любом факе?
http://ru.wikipedia.org/wiki/Robots.txt

то что роботы хуй забивают это другой вопрос. но изначально директива то для блокировки
она и в RFC поди так прописана, а гугль кладёт болт на RFC?
Как показывает практика, ссылками можно пробить индексацию закрытых в роботсе страниц. Либо это как то связано с рассинхронизацией баз в самом гугле. Хз. Но в любом случае по ссылкам и страницам закрытым в роботсе боты ходят и не только гугловские.
__________________
Seo Блог | Создание сайтов | Продвижение сайтов. Работа по белому и без пустых гарантий.
nobody0 вне форума  
Старый 26.10.2010, 12:13   #9
bablolover
Senior Member
 
Аватар для bablolover
 
Регистрация: 10.10.2010
Сообщений: 1,060
Бабло: $126610
По умолчанию

Цитата:
Сообщение от nobody0 Посмотреть сообщение
Как показывает практика, ссылками можно пробить индексацию закрытых в роботсе страниц. Либо это как то связано с рассинхронизацией баз в самом гугле. Хз. Но в любом случае по ссылкам и страницам закрытым в роботсе боты ходят и не только гугловские.
ну.. как говорится "что я делаю не так?" - хз
может ссылками и можно.. не пробовал. наверное можно и в код бота впаять адрес страницы, как первостепенной для посещения, но речь не о том
__________________
покупаю худеющий ру-траф в любых кол-вах
стоимость смс на номер
bablolover вне форума  
Старый 26.10.2010, 12:16   #10
nobody0
Мастер
 
Аватар для nobody0
 
Регистрация: 04.04.2007
Адрес: sweet home
Сообщений: 265
Бабло: $39823
По умолчанию

Цитата:
Сообщение от bablolover Посмотреть сообщение
ну.. как говорится "что я делаю не так?" - хз
а ты закрыть пытаешся там образом?

Самый лучшим способом запретить шастать ботам - "deny from all" в htaccesse
__________________
Seo Блог | Создание сайтов | Продвижение сайтов. Работа по белому и без пустых гарантий.
nobody0 вне форума  
Закрытая тема



Опции темы
Опции просмотра