Par expérience on a été plutôt sévère dans nos notations.
Je dirais qu'on à une marge d'erreur de -10 +5
on a probablement sous noté facilement de -10 et rarement on a surnoté de 5. Si on publiait dans un magazine commercial, on pourrait facilement remonter les scores de +10% pour faire plaisir à nos annonceurs.
Tenir compte d'un biais, c'est annoncer la marge d'erreur : voilà qui est fait.
La marge te convient-elle, sinon, je t'enjoins à faire ton propre caclul et évaluer la déviance standard par rapport à nos propres résultat (faire la moyenne des diff normalisées entre tes résultats et les notres). Si le biais est systématique et dans une même direction (la relation d'ordre est donc conservée), c'est cool : ça veut dire que l'instrument est à étalonner, mais que nos critères permetent d'établir une relation d'ordre. Si à l'opposé tu trouves que tes mesures fluctuent (moitié sur-évalué, moitié sous évalué dans une proportion significative), ça veut dire que nos critères sont arbitraires, au moins en ce qui te concerne.
[^] # Re: Firefox
Posté par Jul (site web personnel) . En réponse à la dépêche Quatre nouveaux logiciels libres pour entreprises. Évalué à 2.
Je dirais qu'on à une marge d'erreur de -10 +5
on a probablement sous noté facilement de -10 et rarement on a surnoté de 5. Si on publiait dans un magazine commercial, on pourrait facilement remonter les scores de +10% pour faire plaisir à nos annonceurs.
Tenir compte d'un biais, c'est annoncer la marge d'erreur : voilà qui est fait.
La marge te convient-elle, sinon, je t'enjoins à faire ton propre caclul et évaluer la déviance standard par rapport à nos propres résultat (faire la moyenne des diff normalisées entre tes résultats et les notres). Si le biais est systématique et dans une même direction (la relation d'ordre est donc conservée), c'est cool : ça veut dire que l'instrument est à étalonner, mais que nos critères permetent d'établir une relation d'ordre. Si à l'opposé tu trouves que tes mesures fluctuent (moitié sur-évalué, moitié sous évalué dans une proportion significative), ça veut dire que nos critères sont arbitraires, au moins en ce qui te concerne.