Le site en question peuple sa page web avec des liens récupérés par robot. Une exclusion des robots supprimerait la possibilité de tv-replay.fr de proposer les vidéos de M6, la mise à jour à la main étant très chère à organiser.
Alors pourquoi M6 n'utilise-t-elle pas le fichier robots.txt ? M6 n'a peut-être pas envie de disparaitre de google. C'est ce qui fait le paradoxe de leur attitude : ils acceptent que des moteurs de recherche fournissent une liste de liens, mais se fâchent qu'un site spécialisé dans la vidéo fasse la même chose.
[^] # Re: J'en oublie robots.txt
Posté par JGO . En réponse au journal Les vidéos incluses gagnent dans un tribunal français. Évalué à 10.
Alors pourquoi M6 n'utilise-t-elle pas le fichier robots.txt ? M6 n'a peut-être pas envie de disparaitre de google. C'est ce qui fait le paradoxe de leur attitude : ils acceptent que des moteurs de recherche fournissent une liste de liens, mais se fâchent qu'un site spécialisé dans la vidéo fasse la même chose.