Article

Du bureau de la rédaction: Pourquoi les scores DxOMark sont fondamentalement sans valeur

protection click fraud
OnePlus 5, LG G6

Cette semaine, après une petite fanfare, le OnePlus 5 a décroché un score DxOMark Mobile de 87. Un jour plus tard, comme s'il était parfaitement chronométré pour démontrer les failles de son système de notation, DxO a donné au LG G6 un 84. Et l'Internet est convenablement agité. Les fils de commentaires suggèrent que quelque chose de fâcheux s'est produit à la suite du partenariat récemment annoncé entre OnePlus et DxO. Reddit nage dans une colère incrédule.

Permettez-moi de commencer par dire que je ne pense pas que DxO ait permis à combien d'argent a changé de mains entre lui et OnePlus pour influencer l'objectivité de ses tests. Personne n'achète ou ne vend directement des scores de référence plus élevés - ce serait fou. Néanmoins, il est devenu clair que pour juger si un appareil photo de smartphone est meilleur qu'un autre, les scores numérotés de l'entreprise sont, au mieux, erronés.

Verizon propose le Pixel 4a pour seulement 10 $ / mois sur les nouvelles lignes illimitées

Les scores globaux de DxO sont tirés d'une moyenne de sous-scores pour l'exposition et le contraste, l'autofocus couleur, la texture, le bruit, les artefacts et la stabilisation. Il y a un bref explicatif (datant de 2012) détaillant comment DxO génère ces scores mobiles, montrant apparemment un mélange de tests automatiques et perceptifs - ce dernier impliquant un humain utilisant le téléphone dans le monde réel. Pour les tests automatisés, DxO s'appuie sur des logiciels comme son propre DxO Analyzer, qui est utilisé par les plus grands fabricants d'appareils photo au monde pour évaluer la qualité de l'image.

Les spécificités du partenariat de DxO avec OnePlus (et d'autres fabricants comme HTC et Google) n'ont pas été divulguées publiquement. Mais vraisemblablement, c'est à ce logiciel, ainsi qu'à d'autres équipements de test, que les équipes d'imagerie de ces fabricants de téléphones ont accès.

OnePlus 5

Les scores numérotés uniques pour les caméras de téléphone sont à la fois trop vagues et trop spécifique.

Tout d'abord, traitons les défauts de l'utilisation d'un seul numéro pour résumer toute l'expérience de la caméra mobile. Réduire un appareil photo de smartphone à un pourcentage a le problème d'être à la fois trop vague et trop spécifique. Un nombre - une moyenne non pondérée - ne rend pas justice à la complexité des appareils photo modernes des smartphones, où les performances peuvent varier considérablement en fonction de la situation, et tous les facteurs ne sont pas égaux important. Dans le même temps, un score sur 100 implique précision. Le OnePlus 5, le Huawei P10 et le Samsung Galaxy S6 edge + sont tous également bons, les chiffres nous le disent. Le LG G6 et le Moto G4 Plus, également égaux, avec des scores DxO de 84. Quiconque a utilisé ces appareils dans le monde réel vous dira que la réalité n'est même pas proche.

Pendant ce temps, DxO évalue le Galaxy S6 edge + comme un 87, tandis que le Galaxy Note 5 est un 86. Les deux téléphones ont le même matériel interne et les mêmes modules de caméra. Il y a un écart d'un point entre ces deux téléphones, qui en termes d'imagerie sont identique. Il existe également une différence d'un point entre un Samsung Galaxy S8 et un Sony Xperia Z5, qui sont distants de plusieurs années-lumière en termes de performances réelles.

Cela souligne la folie de mettre en stock ces partitions numérotées uniques pour les caméras de téléphone, en particulier lorsque le même écart peut exister entre deux caméras physiquement identiques et deux très, très différents. Les scores DxO peuvent bien servir de référence décente pour les capacités brutes de chaque caméra (personnellement, je pense que même cela est discutable - voir l'exemple LG G6 vs Moto G4 Plus ci-dessus), mais ils ont également pour effet de brouiller les détails importants autour utilisation dans le monde réel.

Les scores de DxOMark ne correspondent souvent pas à la réalité, nous disant que le LG G6 n'est aussi bon que le Moto G4 Plus de l'année dernière.

Les critiques écrites de DxO sont beaucoup plus informatives - elles creusent en fait les détails importants qui font que l'appareil photo d'un téléphone est bon ou mauvais. Pourtant, ce sont les chiffres que les fabricants affichent dans leurs supports marketing, et que DxO affiche hiérarchiquement dans sa barre latérale.

Ensuite, il y a le problème très évident - et le conflit d'intérêts potentiel - de la vente de matériel de test aux fabricants de téléphones que vous utiliserez éventuellement pour les évaluer publiquement en fonction de leurs performances. L'idée, vraisemblablement, est de permettre aux fabricants de téléphones d'améliorer leurs appareils photo en utilisant des tests scientifiques répétables autour de la qualité d'image. Mais cela a également pour effet de permettre aux OEM de «faire le test».

LG G6

Le modèle de partenariat de DxO permet aux équipementiers d'`` enseigner au test ''

Comme un étudiant rusé se préparant à un test standardisé, les fabricants qui s'associent à DxO et ont accès à son matériel et logiciels, peuvent régler leur traitement d'image pour réussir les tests de synthèse de l'entreprise (dans les limites du matériel, de cours). En conséquence, leurs scores d'évaluation sont plus élevés lorsque DxO les publie finalement - car ils ont toujours eu accès au matériel de test. Les fabricants qui ne s'associent pas à DxO sont automatiquement désavantagés en termes de score, même si la qualité d'image dans le monde réel et en dehors du laboratoire n'est peut-être pas bien pire. Lorsque cela se produit, comme c'est le cas, les consommateurs qui font confiance aux comparaisons entre les scores des partenaires et des non-partenaires sont potentiellement induits en erreur.

C'est ainsi que nous nous retrouvons avec des scores qui vous disent que le Moto G4 Plus est aussi bon que le LG G6, qui est pire que le OnePlus 5.

Et c'est là que survient le conflit d'intérêts potentiel. Associez-vous à DxO et votre téléphone a la possibilité de maximiser son score d'examen éventuel - et s'il s'agit d'un nouveau téléphone phare, peut-être voler la couronne avec un nouveau score élevé. Les fabricants qui n'autorisent pas les produits de DxO se font concurrence sur un terrain de jeu inégal.

Cela étant dit, souvent DxOMark marque faire correspondre aux observations des critiques techniques expérimentés. La société a correctement qualifié le Google Pixel de meilleur appareil photo pour smartphone de 2016. Et je pense que la plupart des critiques conviendraient que le HTC U11 a, par une mince marge, probablement le meilleur appareil photo de téléphone sorti en 2017 à ce jour.

Mais cela ne devrait pas compenser les exemples flagrants de scores DxOMark qui ne correspondent pas à la réalité, le dont le plus récent nous dit que le téléphone phare de LG de 2017 n'est aussi bon qu'un Motorola d'un an mi-ranger. En conséquence, ces scores peuvent être à peu près sans valeur pour comparer directement deux téléphones ou plus.

Conclusion: les critiques de DxO sont informatives et bien documentées. Mais ces scores numérotés? Oubliez-les.

Autres cotes et fins pour un week-end de travail:

  • Nous sommes à un mois de Android O en cours de finalisation, et sûrement quelques jours avant de découvrir ce que signifie «O». Oatmeal Cookie est apparemment le nom de code interne - ne lisez pas trop dans cela; les noms de code internes sont souvent différents des surnoms publics. Mais réellement quelles autres options existe-t-il à part Oreo? Si Google n'encre pas une sorte de partenariat avec le géant des cookies, Oatmeal Cookie pourrait finir par gagner par défaut.
  • Dans le même ordre d'idées, une grande victoire pour Sony s'il peut être le premier avec Android O sur un nouveau téléphone, comme la rumeur semble le suggérer.
  • DxOMark controverse et jelly scrolling hullabaloo mis à part, je profite de la OnePlus 5, et j'aurai un deuxième article d'opinion au début de la semaine prochaine. La caméra est plutôt bonne. Pas génial. Pas mal. Je lui attribue 85 AleXMarks.
  • Comme je suis sur le point de voyager et que Google insiste toujours pour facturer de l'argent fou pour le Pixel C, j'ai un iPad Pro sur le chemin de moi. (Ne jugez pas.) J'ai utilisé et éteint des iPad au fil des ans - je les vends presque inévitablement après quelques mois. Nous verrons si le dernier est meilleur et comment il s'adapte finalement à iOS 11.
  • Google a sûrement son propre cabriolet en route cet automne. J'attends avec impatience que l'espace de la tablette Android soit moins un terrain vague qu'il ne l'est actuellement.

C'est ça. Plus chaud prend de moi dans quelques semaines.

-Alex

Ce sont les meilleurs écouteurs sans fil que vous pouvez acheter à tous les prix!
Il est temps de couper le cordon!

Ce sont les meilleurs écouteurs sans fil que vous pouvez acheter à tous les prix!

Les meilleurs écouteurs sans fil sont confortables, sonnent bien, ne coûtent pas trop cher et tiennent facilement dans une poche.

Tout ce que vous devez savoir sur la PS5: date de sortie, prix et plus
La prochaine génération

Tout ce que vous devez savoir sur la PS5: date de sortie, prix, etc.

Sony a officiellement confirmé qu'il fonctionnait sur la PlayStation 5. Voici tout ce que nous savons à ce sujet jusqu'à présent.

Nokia lance deux nouveaux téléphones Android One à moins de 200 $
Nouveaux Nokias

Nokia lance deux nouveaux téléphones Android One économiques de moins de 200 $.

Nokia 2.4 et Nokia 3.4 sont les derniers ajouts à la gamme de smartphones économiques de HMD Global. Comme ce sont tous les deux des appareils Android One, ils sont garantis de recevoir deux mises à jour majeures du système d'exploitation et des mises à jour de sécurité régulières pendant trois ans maximum.

Sécurisez votre maison avec ces sonnettes et serrures SmartThings
Ding Dong - portes verrouillées

Sécurisez votre maison avec ces sonnettes et serrures SmartThings.

L'une des meilleures choses à propos de SmartThings est que vous pouvez utiliser une multitude d'autres appareils tiers sur votre système, sonnettes et serrures incluses. Comme ils partagent tous essentiellement le même support SmartThings, nous nous sommes concentrés sur les appareils dotés des meilleures spécifications et astuces pour justifier leur ajout à votre arsenal SmartThings.

instagram story viewer