• [^] # Re: wget, curl

    Posté par . En réponse au message Parcourir un site web en mode spider. Évalué à 2.

    Je suis bien d'accord, la base est déjà pas mal optimisée (index de différents types sur les colonnes adéquates, tuning du serveur sql ...), EXPLAIN ANALYZE est mon ami.
    Voir mon commentaire au dessus, j'ai optimisé une requête faisant des recherches dans une colonne de type tableau.

    J'utilise postgresql pour plusieurs raisons :
    - parce que je le préfère à tout autre sgbdr
    - parce que j'utilise des triggers
    - parce que j'utilise tsearch
    ....

    Il reste une chose que je n'arrive pas à optimiser, les requêtes avec LIMIT .. OFFSET .. lorsque le nombre de résultat est trop grand (jusqu'à 1 million de ligne) et je ne peux pas utiliser les CURSORS. Il me semble que ce problème est commun à tous les sgbdr, je n'ai pas le temps de faire les tests avec mysql.

    Pour la mise en cache, pourquoi s'en priver si je dispose des ressources nécessaires ?
    apache ne répondra jamais aussi rapidement que varnish si la page est en cache, et encore moins lorsque le trafic simultané augmentera.