• [^] # Re: table de hachage

    Posté par . En réponse au message Traitement de gros fichier. Évalué à 1.

    Merci de ta reponse je vais essayer d'etre plus precis

    Ce traitement sera lancer occasionellement. Oui il y a une contrainte de temps, le script ne doit pas dépasser les 20mins. Pour ce qui est des ressources machine il y a pas de contrainte.

    Le champs 8 ( qui nous sert de reference entre les deux fichiers ) peut varier énormément.

    Les fichiers n'évolue pas, pour resumé le context on a effectuer une fusion entre deux entité et on veux vérifer que ce qui était dans l'entité A ce retrouve bien dans l'entité B.

    On a donc extrait le 1er fichiers avant fusion puis le second fichier après fusion. Les deux fichier sont des extrait de base de donnée mais je n'est pas la main sur les extractions je les recois tel quel.

    ex du fichier 1 ( ~ 7000 lignes ) :

    04129441;555;wJsQC0000OpkA;SOLEV003930;CR;11.69;wJsQC0000OpkA;MmDx90005bejL

    ex du fichier 2 ( + de 7 millions de lignes ) :

    00473316;009;wJsQC00006A50;109FL002698;CR;1.98;wJsQC00006A50;MmDx90004D59C

    J'espère que c'est plus claire comme sa.