Реклама на сайте Advertise with us

Бинг валит сайты. как правильно ограничить его?

Расширенный поиск по форуму
 
Новая тема Новая тема   
Автор
Поиск в теме:

zza

С нами с 19.10.03
Сообщения: 9911
Рейтинг: 4827


Передовик Master-X (01.06.2011) Передовик Master-X (16.06.2011) Передовик Master-X (16.03.2014) Передовик Master-X (01.04.2014)
Ссылка на сообщениеДобавлено: 14/05/15 в 12:34       Ответить с цитатойцитата 

приветы, коллеги и сочувствующие )

как бинга ограничить?

достаточно ли сайт в бинг вебмастерс добавить и снизить скорость, или к нему еще роботс допилить

User-agent: MSNBot/Bingbot
Crawl-delay: 5

спасибо!

pi

4
 

продаю базы адалт кейвордов

С нами с 09.11.02
Сообщения: 9045
Рейтинг: 3772


Передовик Master-X (16.05.2004) Передовик Master-X (01.06.2004)
Ссылка на сообщениеДобавлено: 14/05/15 в 12:37       Ответить с цитатойцитата 

Лучше в роботс прописать, надежнее, имхо

сдам подпись, стучите в личку

12
 

AdultDesign.Guru

С нами с 22.03.09
Сообщения: 1686
Рейтинг: 1325


Передовик Master-X (16.04.2009) Передовик Master-X (01.09.2012) Передовик Master-X (16.09.2012)
Ссылка на сообщениеДобавлено: 15/05/15 в 10:48       Ответить с цитатойцитата 

Мой вопрос будет некоректным может.
Чем плох Бинг то этож вроде тоже поисковая систему. Почему он тебя валит ? icon_smile.gif

Дизайн, Верстка и Сайты под Ключь от AdultDesign.Guru

12
 



С нами с 24.10.04
Сообщения: 18881
Рейтинг: 9010


Передовик Master-X (16.03.2006) Передовик Master-X (01.04.2006) Передовик Master-X (16.04.2006) Передовик Master-X (01.05.2006) Передовик Master-X (01.11.2006) Ветеран трепа Master-X ()
Ссылка на сообщениеДобавлено: 15/05/15 в 11:03       Ответить с цитатойцитата 

CreativeMotionArt писал:
Мой вопрос будет некоректным может.
Чем плох Бинг то этож вроде тоже поисковая систему. Почему он тебя валит ? icon_smile.gif


плохо оптимизированная система, когда каждый запрос страницы сайта расходует ресурсы, при массовых запросах получается ддос поисковиком trollface.png

11
 



С нами с 08.02.03
Сообщения: 10558
Рейтинг: 5961


Передовик Master-X (01.06.2018) Передовик Master-X (16.06.2019) Передовик Master-X (01.04.2020) Передовик Master-X (16.04.2020) Передовик Master-X (16.10.2021) Ветеран трепа Master-X (01.11.2021)
Ссылка на сообщениеДобавлено: 15/05/15 в 22:19       Ответить с цитатойцитата 

3Sky писал:

User-agent: MSNBot/Bingbot
Crawl-delay: 5

спасибо!

Мне это не особо помогло даже 20 параметр icon_sad.gif
Дидосит тока в путь...

11
 

www.phpdevs.com

С нами с 24.10.02
Сообщения: 16633
Рейтинг: 16105


Передовик Master-X (01.09.2005) Передовик Master-X (16.09.2005) Передовик Master-X (01.10.2005) Передовик Master-X (16.08.2006) Передовик Master-X (16.10.2006) Ветеран трепа Master-X ()
Ссылка на сообщениеДобавлено: 15/05/15 в 22:34       Ответить с цитатойцитата 

http://nginx.org/ru/docs/http/ngx_http_limit_req_module.html

как вариант, если nginx используется.

Т.е. примерно так:

Код:
http {

     map $http_user_agent $limit_bots {
         default '';
         ~*(google|bing|yandex|msnbot) $binary_remote_addr;
     }

     limit_req_zone $limit_bots zone=bots:10m rate=1r/m;

     server {
         location / {
             limit_req zone=bots burst=5 nodelay;
         }
     }
}

Пишу на php/mysql/django за вменяемые деньги.
Обращаться в личку.

10
 

пьяный мастер

С нами с 06.09.05
Сообщения: 11906
Рейтинг: 5835


Передовик Master-X (16.12.2006) Передовик Master-X (01.01.2007) Передовик Master-X (16.01.2007) Передовик Master-X (16.09.2020)
Ссылка на сообщениеДобавлено: 15/05/15 в 23:58       Ответить с цитатойцитата 

Уясе бинг ддосит trollface.png надо в суд на него подать...

11
 



С нами с 20.03.12
Сообщения: 70
Рейтинг: 65

Ссылка на сообщениеДобавлено: 16/05/15 в 01:42       Ответить с цитатойцитата 

Слышал гугловский ддосит тока в путь

анти ддос выглядит так

User-agent: *
Disallow: /

trollface.png

10
 



С нами с 18.10.02
Сообщения: 4165
Рейтинг: 3365

Ссылка на сообщениеДобавлено: 16/05/15 в 11:25       Ответить с цитатойцитата 

Сколько там запросов с него в секунду? Может лучше поработать над оптимизацией, чем ограничивать бота?

10
 



С нами с 21.03.15
Сообщения: 11
Рейтинг: 22

Ссылка на сообщениеДобавлено: 16/05/15 в 17:26       Ответить с цитатойцитата 

Если на сайтах динамики мало - используй портовое проксирование smail54.gif , для знающего админа это 10-20 минут работы

10
 

zza

С нами с 19.10.03
Сообщения: 9911
Рейтинг: 4827


Передовик Master-X (01.06.2011) Передовик Master-X (16.06.2011) Передовик Master-X (16.03.2014) Передовик Master-X (01.04.2014)
Ссылка на сообщениеДобавлено: 16/05/15 в 17:48       Ответить с цитатойцитата 

всем спасибо, админам топик показал

pi

2
 

Опытный плюсополучатель

С нами с 09.06.05
Сообщения: 8305
Рейтинг: 186

Ссылка на сообщениеДобавлено: 01/06/15 в 02:11       Ответить с цитатойцитата 

3Sky писал:
всем спасибо, админам топик показал

3Sky: Было бы интересно узнать, как решили проблему (когда она решится). Поскольку я сейчас тоже буржуйский проект запускать собираюсь и не хотелось бы наступить на те же грабли.

8
 

zza

С нами с 19.10.03
Сообщения: 9911
Рейтинг: 4827


Передовик Master-X (01.06.2011) Передовик Master-X (16.06.2011) Передовик Master-X (16.03.2014) Передовик Master-X (01.04.2014)
Ссылка на сообщениеДобавлено: 01/06/15 в 02:13       Ответить с цитатойцитата 

рассказую ) все сайты добавлены в бинг вебмастерс

похуй ему icon_smile.gif

сейчас буду мучать роботс.

админы отписали, что делали так, как отписал Stek. толку нет

пока бинг отключен, ла дает хавайся

pi

1
 

Опытный плюсополучатель

С нами с 09.06.05
Сообщения: 8305
Рейтинг: 186

Ссылка на сообщениеДобавлено: 01/06/15 в 03:55       Ответить с цитатойцитата 

3Sky: держи в курсе smail101.gif

8
 



С нами с 30.10.12
Сообщения: 3121
Рейтинг: 2542


Передовик Master-X (16.02.2018) Передовик Master-X (01.03.2018) Передовик Master-X (01.05.2018) Передовик Master-X (16.05.2018) Передовик Master-X (01.07.2018) Ветеран трепа Master-X (16.09.2018)
Ссылка на сообщениеДобавлено: 01/06/15 в 07:20       Ответить с цитатойцитата 

Хуясе проблемы у людей...Это на чем же стоит сайт,я имею ввиду сервак,что его бинговский робот может заддосить smail101.gif Меня бы Гоогле заддосил бы поисковыми роботами своими я был бы несказано рад

9
 



С нами с 21.03.15
Сообщения: 11
Рейтинг: 22

Ссылка на сообщениеДобавлено: 01/06/15 в 11:56       Ответить с цитатойцитата 

А что именно подает? Может скрипты сами тяжелые, ну или в крайнем случае тебя просто ддосят, а юзерагент подменили бинговским icon_sad.gif

Сколько там того бинга....

9
 

zza

С нами с 19.10.03
Сообщения: 9911
Рейтинг: 4827


Передовик Master-X (01.06.2011) Передовик Master-X (16.06.2011) Передовик Master-X (16.03.2014) Передовик Master-X (01.04.2014)
Ссылка на сообщениеДобавлено: 06/06/15 в 15:23       Ответить с цитатойцитата 

чо делать-то? он зыбал icon_smile.gif

базы большие ребяты, много страниц, много контента

pi

0
 



С нами с 18.10.02
Сообщения: 4165
Рейтинг: 3365

Ссылка на сообщениеДобавлено: 06/06/15 в 15:37       Ответить с цитатойцитата 

3Sky писал:
чо делать-то?

Проще всего в консоли от рута запустить:
shutdown -h now
trollface.png

8
 

zza

С нами с 19.10.03
Сообщения: 9911
Рейтинг: 4827


Передовик Master-X (01.06.2011) Передовик Master-X (16.06.2011) Передовик Master-X (16.03.2014) Передовик Master-X (01.04.2014)
Ссылка на сообщениеДобавлено: 06/06/15 в 15:43       Ответить с цитатойцитата 

еще хороших советов?

pi

0
 



С нами с 18.10.02
Сообщения: 4165
Рейтинг: 3365

Ссылка на сообщениеДобавлено: 06/06/15 в 15:53       Ответить с цитатойцитата 

Посоветуй админам про iptables (и опционально fail2ban) почитать.

8
 

zza

С нами с 19.10.03
Сообщения: 9911
Рейтинг: 4827


Передовик Master-X (01.06.2011) Передовик Master-X (16.06.2011) Передовик Master-X (16.03.2014) Передовик Master-X (01.04.2014)
Ссылка на сообщениеДобавлено: 06/06/15 в 15:56       Ответить с цитатойцитата 

спасибо, отписал )

pi

0
 



С нами с 23.07.15
Сообщения: 13
Рейтинг: 6

Ссылка на сообщениеДобавлено: 03/08/15 в 12:13       Ответить с цитатойцитата 

редирект бинго-траффика сделай,многие купят оптом:-) а то заблоченный денег не приносит

0
 
Новая тема Новая тема   

Текстовая реклама в форме ответа
Заголовок и до четырех строчек текста
Длина текста до 350 символов
Купить рекламу в этом месте!


Перейти:  



Спонсор раздела Стань спонсором этого раздела!

Реклама на сайте Advertise with us

Опросы

Рецепт новогоднего блюда 2022



Обсудите на форуме обсудить (11)
все опросы »