Je veux bien que l'IA soit à la mode, qu'il y ait plein de startups qui se lancent dans le truc. Mais pour télécharger des Tera octets de curl, il faut le télécharger des millions de fois ! Comment en arrivent-ils à ça ?
Qu'un site comme github se fasse pourrir, je comprends, il y a bcp de projets... mais les petits forges logicielles qui se plaignent, ça veut dire qu'il y a des millions de crawlers qui tournent ?
À se demande si ça coûte pas moins cher de redownloader plutôt que de stocker ?
En théorie, la théorie et la pratique c'est pareil. En pratique c'est pas vrai.
# Je comprends pas
Posté par gUI (Mastodon) . En réponse au lien Le site de curl désormais à 1,6 Go/minute de trafic à cause des crawlers pour LLMs. Évalué à 9.
Je veux bien que l'IA soit à la mode, qu'il y ait plein de startups qui se lancent dans le truc. Mais pour télécharger des Tera octets de curl, il faut le télécharger des millions de fois ! Comment en arrivent-ils à ça ?
Qu'un site comme github se fasse pourrir, je comprends, il y a bcp de projets... mais les petits forges logicielles qui se plaignent, ça veut dire qu'il y a des millions de crawlers qui tournent ?
À se demande si ça coûte pas moins cher de redownloader plutôt que de stocker ?
En théorie, la théorie et la pratique c'est pareil. En pratique c'est pas vrai.