как ограничить ботов через htaccess?
я добавил вот это
SetEnvIfNoCase User-Agent \"^Baiduspider\" bad_bot
SetEnvIfNoCase User-Agent \"^MSNBot\" bad_bot
SetEnvIfNoCase User-Agent \"^ia_archiver\" bad_bot
SetEnvIfNoCase User-Agent \"^Sogou\" bad_bot
SetEnvIfNoCase User-Agent \"^Exabot\" bad_bot
SetEnvIfNoCase User-Agent \"^cuil.com\" bad_bot
Order Allow,Deny
Allow from all
Deny from env=bad_bot
это правильно ли? из за этого каких либо минусов в работе сайта не будет?
Правильно. Минусов в работе сайта не будет, разве что SEO
что будет с seo? просто если не ограничиваю поисовые бота, то а месяц мой сайт на грабах жрет 200гб трафика
Ну просто твой сайт в поисковиках не будет индексироваться, а так норм все будет)
блин(( мой сайт уже индексироавн. и я хател повысить тиц и пр очень высоко. в даное время у меня пр2 и тиц0.
Индексировано Yandex 3127 страниц
Google 32000 страниц
Я там многго вложил на SEO, теперь всё это пропадет?
Нет, не пропадет, просто дальше сайт не будет индексироваться)
тоесть пр2 и индексированные страницы останутся в индексе??
Страницы останутся точно, пр по идее тоже упасть не должен...