Re: il me semble que ...

Retourner au contenu associé (journal : MSN Search se moque du fichier robot.txt ?)

[^] # Re: il me semble que ...

Posté par Bruno Ethvignot (site web personnel) le 09 août 2004 à 11:11. En réponse au journal MSN Search se moque du fichier robot.txt ?. Évalué à 2.

Oui c'est robots.txt, même si je n'ai pas mis de 's' dans mon journal, le fichier lui a bien un 's'.
http://linux.tlk.fr/robots.txt(...)

MSNbot respecte ce fichier dans le sens ou ce robot ne vas pas lire les pages. Mais MSNbot y accède pas des moyens détournés