• [^] # Re: Retours d’expériences ?

    Posté par . En réponse à la dépêche Illico Editor : nouveautés depuis 2019. Évalué à 6.

    sur le plan technique

    Je n'ai pas l'occasion de travailler avec des gros jeux de données.

    Après plusieurs tests, j'ai trouvé une limite autour de 100Mo avec interruption du chargement de données.

    Les ordres de grandeur sont indiqués dans la documentation :

    http://illico.tuxfamily.org/doc/build/html/fct/principes.html#jeu-de-donnees-volumineux

    En testant avec jeu de données Kaggle de 30 Mo (19 colonnes x 170 653 lignes), j'obtiens un chargement quasi-instantané.
    Les aperçus complets (tout le jeu de données) sont alors nettement plus lents à être générés.
    La plupart des traitements se réalisent en quelques secondes.

    Les fonctions d'analyse agrégats -> domaine de valeur et agrégats -> explorer les données te permettront de naviguer facilement dans les sous-ensembles de données malgré le volume de données.

    L'export CSV s'ouvre au bout de 2 secondes, ce qui reste raisonnable.

    sur le plan pratique

    Pour la problématique que tu rencontres, si tu as accès à la source de données, je te conseille de lotir la qualification (soit par périmètre homogène, par exemple une base client découpée en portefeuille par commercial, par région...

    Autre approche possible pour rendre la qualification digeste (tant pour les collègues et pour les logiciels) : lotir verticalement : que les produits, que les clients, que les adresses des clients, etc.

    Tu auras sûrement besoin d'un autre outil, programmable, pour rejouer à plusieurs reprises les scénarii.

    Illico trouvera plutôt sa place en amont (tests exploratoires) et en aval (vérification).