Форум OlegON > Компьютеры и Программное обеспечение > Сеть

IP-адреса ботов Яндекса, Google, Mail.ru и Bing

02.04.2020 22:31


09.12.2015 15:01
OlegON
 
Собрал в список адреса ботов Яндекса, Google, Mail.ru и Bing, проявивших значительную активность на форуме. Список обновляется автоматически.

Поисковые боты, побывавшие на форуме
18.12.2015 10:28
aldemko
 
Мне всегда было интересно почему один итот же бот использует миллион разных IP
18.12.2015 10:37
OlegON
 
Во-первых, он не один, это куча серверов, поскольку иначе миллионы страниц в день не перелопатишь.
Во-вторых, там еще и географическое распределение. Все боты кластерные. Издалека все соединения будут долгими...

Форум на базе vBulletin®
Copyright © Jelsoft Enterprises Ltd.
В случае заимствования информации гипертекстовая индексируемая ссылка на Форум обязательна.