• [^] # Re: 150000 références

    Posté par . En réponse au message Le problème des bières et des couches en data mining. Évalué à 3.

    Elles concernent quel problème ces 150000 références ? La façon d'optimiser le stockage d'information hors d'un SGBD ?

    Je ne saisi pas la question.

    150000 lignes dans une table ne posent pas de problème.
    Par contre ce nombre élevé au carré (pour stocker la corrélation entre les articles 2 par 2), ça commence à tirer sur les temps d'accès disque lorsqu'on fait des requêtes dessus. En gros ça fait 22 milliards d'écritures sur disque. À 5 ms par écriture en étant optimiste ça donne plus de 3 ans. Y'a comme un problème.
    Il faut donc découper le problème en ne remplissant qu'une partie de la table à chaque fois, de manière à faire tenir les données dans la mémoire.