Новости
Активные обсуждения
- Прогон по трастовым сайтам , тематический постинг , доски объявлений
- Быстрая индексация сайта
- Регистрация Белорусских сайтов в каталогах
- Блог о финансовой грамотности finnez.com
- Требуеться SEO- специалист.
- Монетизируем трафик вместе, CPA партнерка
- Галиор-маркет
- Вебмастер - поставщик трафика. Преимущество ИП
- Абузоустойчивый хостинг-сервис, доверяй профессионалам
- VivaPays - Конвертация развлекательного трафика. СМС доход. Гарантия качество.
21
Марта
2009
Надоел бот yahoo. Кушает и кушает
Опубликовано:Konstantin_by Comments: 3
Есть такая проблемка. Сайт индексирует yahoo и трафик от него все растет и растет.
ПРавильно ли я закрыл в роботс?
User-Agent: Yahoo! Slurp
User-agent: Yahoo-MMCrawler
User-agent: Slurp
Crawl-delay: 10
Disallow: /
В интернете и на сайте Yahoo нормального описания блока робота не нашел
- Блог пользователя Konstantin_by
- Войдите на сайт для отправки комментариев
Похожие материалы
- Новые имена для User-Agent роботов Яндекса
- Yahoo теперь будет работать под Bing
- GeoCities пришёл безвозвратный конец
- Yahoo! осваивает Рунет
- Mail.ru сменит поисковой движок?
- Google теряет позиции
- Google купил сервис скидок Groupon
- Google теряет лидирующие позиции
- Yahoo! проявляет активность
- Какие есть сервсиы статистики запросов SE?
- Yahoo & Bing не индуксируют сайт
- SEO-специалист/собственные проекты (ActiveMedia)
- Безопасная поисковая система WalpeX
- Google захватил поисковой рынок
- Groupon отверг предложение Google
Навигация по подшивке
Опрос
Google
Яндекс
seo
Facebook
Google Adwords
Microsoft
реклама
Mail.ru Group
IPO
Mail.ru
Вконтакте
оптимизация
продвижение
bing
Apple
ссылки
указ № 60
Байнет
Gmail
указ №60
поиск
AGA-08
yandex
Twitter
Белтелеком
работа
Яндекс.Директ
семинар
Яндекс. Директ
SERP
интернет
тиц
ранжирование
«Вконтакте»
контекстная реклама
Google Analytics
Yahoo
сайт
пиратство
сниппеты
Skype
контент
Internet Explorer
апдейт
Минсвязи
интернет- маркетинг
tut.by
домен
adwords
HTML5
Дизайн-альфа
Seo.by выходит с дизайном в стадии альфа на открытое тестирование. Просьба не пугаться, а наоборот, если есть дельные предложения, то оставлять их в данной ветке.
наивный )
естесственно, что роботс.тхт ничеог не решит и бот как ходил дальше, так и будет ходить )
всё должно решатся через хтаксесс
deny from 66.196.64
deny from 66.228.160
deny from 65.55
politex.team
Вы знаете после того как прописал мною сказанное выше бот пропал. Ура товарищи!
Бесплатные объявления Минск и Интернет Блог
Это не на сайте яху надо смотреть, посмотри как настраивается вообще robot файл в ярушке введи и там полно всякого будет)