• [^] # Re: Réponse de Perplexity

    Posté par . En réponse au lien Perplexity is using stealth, undeclared crawlers to evade website no-crawl directives - CloudFlare. Évalué à 4.

    Ouais mon hypothèse ne fonctionne que si le moteur va récupérer une page précise demandée par l'utilisateur. Comme un navigateur. Si ça déclenche un scan de tout le(s) site(s) qui pourraient avoir l'info puis trier et remonter 3 phrases, ça devient néfaste pour les sites visités.

    les sites ne verraient pas une telle surcharge de travail de la part de ces outils.

    Quand tu dis "ces outils" il faut voir desquels on parle. Parce que je suis sûr que nombre d'entre eux font du crawl "sale" = tout télécharger, quotidiennement, et entraîner les moteurs avec. Et les soucis actuels des différents sites et forges viennent plus de ceux là je pense. Mais la réponse de Perplexity n'est pas assez précise pour qu'on sache de quel côté ils penchent.