Dans le cas du P2P on a plein d'IP différentes, changeantes, etc. donc difficile au site de les limiter. Et dans le cas de Google, le robot est très mesuré (il ne crawle pas le site en une fois, et s'adapte au temps de réponse du site, sauf si on le force). En revanche il me semble avoir vu une histoire (ici ?) de Bing qui aurait été bloqué car trop abusif.
Bref pour résumer ça me semble plutôt un problème de fonctionnement du robot, qu'il soit opéré par une seule entité ou non.
[^] # Re: Et le nombre de connexions au site ?
Posté par DLFP est mort . En réponse au journal je découvre yacy, moteur de recherche p2p. Évalué à 4.
Dans le cas du P2P on a plein d'IP différentes, changeantes, etc. donc difficile au site de les limiter. Et dans le cas de Google, le robot est très mesuré (il ne crawle pas le site en une fois, et s'adapte au temps de réponse du site, sauf si on le force). En revanche il me semble avoir vu une histoire (ici ?) de Bing qui aurait été bloqué car trop abusif.
Bref pour résumer ça me semble plutôt un problème de fonctionnement du robot, qu'il soit opéré par une seule entité ou non.
DLFP >> PCInpact > Numerama >> LinuxFr.org