J'essaye d'être plus précis :
- tu as fais 3 tests.
- 1 test "HEVC est vainqueur de cette comparaison."
- 2 autres "HEVC fait un peu mieux"
tu en conclues "HEVC fait un peu mieux" (pour résumer, oui, bref tu trouve VP9 pas mal), je conclue de tes tests "HEVC est vainqueur de cette comparaison.", car un seul test est utile en fait (les autres sont le passé ou présent à court terme, peu utile pour l'étude de codec qui s'interesse au futur, en général on s'interesse au futur quand on parle d'un outsider, sinon quel interêt?)
C'est le seul point où je voulais en venir, ne souhaitant pas démonter le reste du journal plus que ça et voulant juste me baser sur tes tests et rien d'autre.
Je te concède le point sur les I-frames, en effet j'ai pas mis la distance entre chaque à égalité (...) L'encodage de tous les fichiers, la mise à dispo sur un serveur, les dizaines de visualisations de chaque échantillon et l'écriture de l'article m'ont pris pas mal de temps mine de rien.
Bon, si il faut être plus clair (et un peu plus méchant, j'ai bien essayé de ne pas l'être trop mais tu insiste) : le temps que tu passes à le faire n'est pas une caution sur la qualité du résultat : tu peux passer 2 heures à calculer 1+1, si c'est faux (tu donnes 10 comme résultat mais qu'on a demandé en base 10 : ton réultat est juste sous conditions diveres, mais faux sur ce qui est testé), ça reste faux.
Le problème dans les tests de gens certes passionnés mais pas assez sérieux dans le tests, c'est qu'ils testent des pommes et des poires.
Ici, tu as testé les configs par défaut (à quelques paramètres près) d'encodeurs, ça ne dit pas grand chose sur les performances des encodeurs.
Tu peux passer 1000000 heures sur un protocole de test, si le protocole est faux le résultat sera juste du vent, même si ça peut te faire mal au coeur.
Ici, tu n'as pas testé des formats, mais 2 logiciels avec leurs paramètres par défaut.
Je n'ai pas de chiffres précis à te donner (oui, j'ai dit dans mon premier message que je ne prendrait pas le temps), mais pour info les scientifiques du domaine qui se sont amusés à tester VP9 en concluent plutôt que c'est mieux que AVC Main et moins que AVC High, et n'osent pas comparer à HEVC (vu que HEVC est nettement meilleur que AVC High, la conclusion...), alors que tu veux démontrer que VP9 n'est pas mauvais face à H265, il vaut quand même mieux venir blindé avec un protocole de test qui ne soit pas faux.
Désolé d'être plus méchant sur ce commentaire, mais tu as insisté en parlant de temps de travail là où cette donnée n'est absolument pas pertinente (et montre au contraire qu'il n'y a pas eu de tentative de démarche scientifique, car toute personne faisant une démarche scientifique sait que le temps passé sur un test ne dit absolument rien sur la qualité d'un test) tout en voulant aller à l'opposé de l'industrie dans tes conclusions (donc bon, ça devrait dire que tu as bien étudié, donc ton protocole est blindé). Parler de temps passé pour cautionner un résultat est le meilleur moyen de décrédibiliser un résultat.
PS : pourquoi donc tous ceux à part le promoteur du codec qui payent pour stocker et diffuser ne passent donc pas à VP9 mais passent à HEVC? Sont-ils tous idiots au point de ne pas calculer le gain financier pour leurs actionnaires à passer à VP9 pour ne pas payer la licence H265?
[^] # Re: Lapin compris ?
Posté par Zenitram (site web personnel) . En réponse au journal HEVC/VP9 : x265 vs libvpx. Évalué à -10. Dernière modification le 19 novembre 2014 à 23:19.
J'essaye d'être plus précis :
- tu as fais 3 tests.
- 1 test "HEVC est vainqueur de cette comparaison."
- 2 autres "HEVC fait un peu mieux"
tu en conclues "HEVC fait un peu mieux" (pour résumer, oui, bref tu trouve VP9 pas mal), je conclue de tes tests "HEVC est vainqueur de cette comparaison.", car un seul test est utile en fait (les autres sont le passé ou présent à court terme, peu utile pour l'étude de codec qui s'interesse au futur, en général on s'interesse au futur quand on parle d'un outsider, sinon quel interêt?)
C'est le seul point où je voulais en venir, ne souhaitant pas démonter le reste du journal plus que ça et voulant juste me baser sur tes tests et rien d'autre.
Bon, si il faut être plus clair (et un peu plus méchant, j'ai bien essayé de ne pas l'être trop mais tu insiste) : le temps que tu passes à le faire n'est pas une caution sur la qualité du résultat : tu peux passer 2 heures à calculer 1+1, si c'est faux (tu donnes 10 comme résultat mais qu'on a demandé en base 10 : ton réultat est juste sous conditions diveres, mais faux sur ce qui est testé), ça reste faux.
Le problème dans les tests de gens certes passionnés mais pas assez sérieux dans le tests, c'est qu'ils testent des pommes et des poires.
Ici, tu as testé les configs par défaut (à quelques paramètres près) d'encodeurs, ça ne dit pas grand chose sur les performances des encodeurs.
Tu peux passer 1000000 heures sur un protocole de test, si le protocole est faux le résultat sera juste du vent, même si ça peut te faire mal au coeur.
Ici, tu n'as pas testé des formats, mais 2 logiciels avec leurs paramètres par défaut.
Je n'ai pas de chiffres précis à te donner (oui, j'ai dit dans mon premier message que je ne prendrait pas le temps), mais pour info les scientifiques du domaine qui se sont amusés à tester VP9 en concluent plutôt que c'est mieux que AVC Main et moins que AVC High, et n'osent pas comparer à HEVC (vu que HEVC est nettement meilleur que AVC High, la conclusion...), alors que tu veux démontrer que VP9 n'est pas mauvais face à H265, il vaut quand même mieux venir blindé avec un protocole de test qui ne soit pas faux.
Désolé d'être plus méchant sur ce commentaire, mais tu as insisté en parlant de temps de travail là où cette donnée n'est absolument pas pertinente (et montre au contraire qu'il n'y a pas eu de tentative de démarche scientifique, car toute personne faisant une démarche scientifique sait que le temps passé sur un test ne dit absolument rien sur la qualité d'un test) tout en voulant aller à l'opposé de l'industrie dans tes conclusions (donc bon, ça devrait dire que tu as bien étudié, donc ton protocole est blindé). Parler de temps passé pour cautionner un résultat est le meilleur moyen de décrédibiliser un résultat.
PS : pourquoi donc tous ceux à part le promoteur du codec qui payent pour stocker et diffuser ne passent donc pas à VP9 mais passent à HEVC? Sont-ils tous idiots au point de ne pas calculer le gain financier pour leurs actionnaires à passer à VP9 pour ne pas payer la licence H265?