WEBLEDI.RUВебледи Форум успешных женщин-вебмастеров
27 Май 2017, 20:46:01 *
Добро пожаловать, Гость. Пожалуйста, войдите или зарегистрируйтесь.

Войти
Правила Реклама
 
5
10
15
Свежие ответы
от Alenta (Тизерные и баннерные сети)
от tlpart (Реклама и доход)
от Sergey12 (Работа и услуги)
от Jokya (Yandex)
от juliyasmi (Раскрутка сайтов в поисковиках)
от Yula (Контент, копирайтинг, переводы)
от vsemaykiadmin (CPA-сети)
от KeyAssort (Сервисы и SEO программы)
от lx19912411 (Платное размещение статей и ссылок)
от PeterS (Особенности работы с разными CMS)
от HostiMan (Хостинг)
от vkoksmm1 (SMM для сайта)
от Athina (Продвижение, SEO)
от SvetikUA (Сайты)
от Loria (Google AdSENSE)
Свежие темы
Показать ещё
  Печать  
Страниц: 1
Автор

Тема: Как заблокировать бота  (Прочитано 1743 раз)

0 Пользователей и 1 Гость смотрят эту тему.
Katya13
Хочу на море (ни разу не была...)
Offline Offline

Пол: Женский
Сообщений: 1177


Будь оригинальной - добьешься успеха и вершины!


Просмотр профиля
« : 13 Январь 2015, 10:59:43 »

Ну уже сил больше нет Плачущий, задолбал бот от майл.ру убитца ап стену, долбится и создает нагрузку, я уже и в .htaccess прописала блокировку, видать не так. Может кто знает, как его блокирнуть и что-то еще сделать?
Записан

MaRt
SEO
Offline Offline

Пол: Мужской
Сообщений: 2272



Просмотр профиля
« Ответ #1 : 13 Январь 2015, 12:13:56 »

в роботсе запрет прописать либо на уровне сервера
Записан

Портал о недвижимости

Продвижение вашего бизнеса в интернете
Katya13
Хочу на море (ни разу не была...)
Offline Offline

Пол: Женский
Сообщений: 1177


Будь оригинальной - добьешься успеха и вершины!


Просмотр профиля
« Ответ #2 : 13 Январь 2015, 12:27:21 »

в роботсе запрет прописать либо на уровне сервера
а как в роботсе? так?
User-agent: Mailbot
Disallow: /
Записан

klever
Offline Offline

Пол: Женский
Сообщений: 2119



Просмотр профиля
« Ответ #3 : 13 Январь 2015, 13:19:17 »

Кстати, тоже долбится постоянно. Только что прописала в .htaccess вот так:

RewriteCond %{HTTP_USER_AGENT} Mail.RU_Bot
RewriteRule ^(.*)$ – [F,L]

Вроде перестал.
Записан

* Любые разовые работы в Интернете .

* Здесь .
Katya13
Хочу на море (ни разу не была...)
Offline Offline

Пол: Женский
Сообщений: 1177


Будь оригинальной - добьешься успеха и вершины!


Просмотр профиля
« Ответ #4 : 13 Январь 2015, 13:23:25 »

klever прописано,а  толку нет  Грустный
Записан

klever
Offline Offline

Пол: Женский
Сообщений: 2119



Просмотр профиля
« Ответ #5 : 13 Январь 2015, 13:49:21 »

А у меня есть. Именно Mail.RU_Bot с подчёркиванием?
Но это не выход совсем запрещать. Как бы ограничить его посещения?
Записан

* Любые разовые работы в Интернете .

* Здесь .
dileta10
Не шалю, никого не трогаю...
Offline Offline

Пол: Женский
Сообщений: 984


Я - Лена. Нужно на "Ты".


Просмотр профиля
« Ответ #6 : 14 Январь 2015, 01:32:56 »

Стесняюсь спросить, а разве посещения с поиска mail.ru лишние? Непонимающий  У меня 5% посетителей оттуда.
Записан

Katya13
Хочу на море (ни разу не была...)
Offline Offline

Пол: Женский
Сообщений: 1177


Будь оригинальной - добьешься успеха и вершины!


Просмотр профиля
« Ответ #7 : 14 Январь 2015, 10:23:30 »

dileta10 у меня нет, поэтому мне важнее легкость сайта)
что-то мне ничего не помогло, как заходил, так и заходит, блин и айпи не забанишь  Плачущий
« Последнее редактирование: 14 Январь 2015, 10:40:10 от Katya13 » Записан

MaRt
SEO
Offline Offline

Пол: Мужской
Сообщений: 2272



Просмотр профиля
« Ответ #8 : 14 Январь 2015, 12:50:38 »

сделайте правило для меиловских ботов с параметром 5

User-agent: Mailbot
тут все ваши записи, как для яндекс бота, а внизу строка:
Crawl-delay: 5
Записан

Портал о недвижимости

Продвижение вашего бизнеса в интернете
Katya13
Хочу на море (ни разу не была...)
Offline Offline

Пол: Женский
Сообщений: 1177


Будь оригинальной - добьешься успеха и вершины!


Просмотр профиля
« Ответ #9 : 14 Январь 2015, 12:52:28 »

сделайте правило для меиловских ботов с параметром 5

User-agent: Mailbot
тут все ваши записи, как для яндекс бота, а внизу строка:
Crawl-delay: 5
я 120 поставила и ниче....
Записан

MaRt
SEO
Offline Offline

Пол: Мужской
Сообщений: 2272



Просмотр профиля
« Ответ #10 : 14 Январь 2015, 17:53:30 »

тогда определять по рефереру и делать 301 куда нибудь
Записан

Портал о недвижимости

Продвижение вашего бизнеса в интернете
Katya13
Хочу на море (ни разу не была...)
Offline Offline

Пол: Женский
Сообщений: 1177


Будь оригинальной - добьешься успеха и вершины!


Просмотр профиля
« Ответ #11 : 14 Январь 2015, 22:14:36 »

тогда определять по рефереру и делать 301 куда нибудь
да вот если бы был этот реферер, прочерк стоит...
Записан

Kimin
Offline Offline

Сообщений: 306


Просмотр профиля WWW
« Ответ #12 : 02 Март 2015, 09:36:29 »

Буря в стакане воды) Если ВП - устанавливаем плагин WP-Ban, и прописываем урл, айпи. Все, бот не сможет попасть внутрь никак.
Я этому плагину обязан чистым (98%) Ру-трафом. 3 года собирал базу айпи всего СНГ (Молдова, Украина, Казахстан и пр.), чтобы внести в список. Зато теперь и CTR в порядке, и хрен кто и что спарсит. Пусть трафа меньше процентов на 20-30, но это чистый Ру траф.
Записан

Katya13
Хочу на море (ни разу не была...)
Offline Offline

Пол: Женский
Сообщений: 1177


Будь оригинальной - добьешься успеха и вершины!


Просмотр профиля
« Ответ #13 : 02 Март 2015, 13:45:04 »

Буря в стакане воды) Если ВП - устанавливаем плагин WP-Ban, и прописываем урл, айпи. Все, бот не сможет попасть внутрь никак.
Я этому плагину обязан чистым (98%) Ру-трафом. 3 года собирал базу айпи всего СНГ (Молдова, Украина, Казахстан и пр.), чтобы внести в список. Зато теперь и CTR в порядке, и хрен кто и что спарсит. Пусть трафа меньше процентов на 20-30, но это чистый Ру траф.
это конечно все хорошо, плагин. Но вордпресс от этого легче не становится, чем больше плагинов, тем дольше загружается сайт
Записан

Страниц: 1
  Печать  
 
Перейти в:  

| Sitemap