Qualcomm Snapdragon 865 benchmarks: Bedre og værre end vi håbede

Hvert år giver Qualcomm tech-medier mulighed for at benchmarkere den nyeste Snapdragon Reference Device, så de har en baseline til sammenlign dem med forsendelsesenheder, der kommer måneder senere, og hvilke slags forbedringer de kan forvente i forhold til tidligere Snapdragon platforme.

Det Snapdragon 865 er en stor ting af en række årsager, men med hensyn til lige-op år-til-år benchmark forbedringer er det ret iterativt.

Benchmarks

Kilde: Daniel Bader / Android Central

Mens jeg var på Hawaii til Qualcomms Snapdragon Tech Summit, brugte jeg og mine kolleger, Andrew Martonik og Nirave Gondhia, et par timer på at køre et sæt meget specifikke benchmarks - AnTuTu, Geekbench 5, GFxBench, Androbench, PCMark, Speedometer, Jetstream og et par andre - så vi kunne samle et par tal og finde ud af, at ja, Snapdragon 865 er hurtigere end 855.

Men det skulle ikke komme som en overraskelse. Her er et par af resultaterne, der sammenligner Snapdragon 865 RD med 855 fra det foregående år:

Uanset om benchmarks er CPU- eller GPU-begrænsede, fungerer Snapdragon 865 bedre end sin forgænger over hele linjen. Det er en god ting, fordi det viser, at der opnås gevinster i år over år på trods af ikke at øge urets hastigheder, men ved optimeringer til CPU- og GPU-designene selv. Især er det bemærkelsesværdigt, at Qualcomm stolede på et umodificeret ARM Cortex-A77-design til de primære og ydeevne-kerner i forhold til at foretage ændringer i Cortex-A76-kernerne i sidste års platform.

Vores kolleger hos Anandtech tog et meget dybere dykke ned i Snapdragon 865 og her er hvad de sagde om CPU-systemets ydeevne:

Ydeevne er præcis, hvor Qualcomm annoncerede, at det ville lande, og vi ser en stigning på 25% i SPECint2006 og en 29% i SPECfp2006. På hele siden kører A77 stadig Apples Monsoon-kerner i A11, men det nye Arm-design har nu været i stand til at trunce det i FP-pakken. Vi er stadig lidt langt væk fra mikroarkitekturerne, der indhenter Apples nyeste design, men hvis Arm holder denne 25-30% årlige forbedringsrate op, vi skulle komme der om et par mere gentagelser.

Med andre ord falder Qualcomm stadig i nogle henseender bag Apples 2017 A11-processor, men er nu foran i andre. Men der er en anden fortælling, som vi ikke har nævnt: vedvarende GPU-ydeevne. Qualcomm sagde, at mens den gennemsnitlige GPU-ydeevne skulle være omkring 20-25% bedre i de fleste arbejdsbelastninger, skulle disse arbejdsbelastninger ikke beskatte grafikchippen på samme måde som i tidligere generationer.

Anandtech igen:

Samlet set var vi i stand til at kontrollere Snapdragon 865's præstationsforbedringer, og Qualcomms påstande på 25% synes at være stort set nøjagtige. Problemet er, at dette ikke synes at være nok til at holde trit med de store forbedringer, som Apple har været i stand til at fremvise i løbet af de sidste to generationer.

Under lanceringen af ​​chipsættet var Qualcomm ivrig efter at nævne, at deres produkt er i stand til at fremvise bedre langsigtet vedvarende ydeevne end en konkurrent, der "gasser inden for få minutter". Selvom vi ikke har bekræftelse på, hvem de nøjagtigt henviste til, svarer dataene og fortællingen her kun til Apples enhedsadfærd. Mens vi ikke var i stand til at teste den vedvarende ydeevne af QRD865 i dag, betyder det desværre ikke rigtig noget for Qualcomm som Snapdragon 865 og Adreno 650s højeste ydeevne falder ind på et lavere niveau end Apples A13 opretholdt ydeevne.

Husk mig

Kilde: Daniel Bader / Android Central

Men et område, som Snapdragon 865 sandsynligvis vil glæde folk, især når det kommer til appindlæsningstider og generel snappiness omkring operativsystemet, er dens forbedrede hukommelsestid. Anandtech igen:

En af de større ændringer i SoC denne generation var integrationen af ​​en ny hybrid LPDDR5 og LPDDR4X hukommelsescontroller. På QRD865-enheden har vi testet, at chippen naturligvis var udstyret med den nye LP5-standard. Qualcomm nedtone faktisk betydningen af ​​selve LP5: den nye standard bringer højere hukommelseshastigheder giver bedre båndbredde, men ventetid skal være den samme, og energieffektivitetsfordele, mens der ikke, bør være overspilte. Ikke desto mindre hævdede Qualcomm, at de fokuserede mere på at forbedre deres hukommelsescontrollere, og dette år ser vi endelig den nye chip adressere nogle af de svagheder, der er vist de sidste to generationer; hukommelsesforsinkelse.

Vi havde kritiseret Qualcomms Snapdragon 845 og 855 for at have ret dårlig hukommelseslatens - lige siden virksomheden havde introduceret deres systemniveau cache-arkitektur til designene, havde dette aspekt af hukommelsessystemet set nogle ret middelmådige egenskaber. Der har været mange argumenter med hensyn til, hvor meget dette faktisk påvirkede præstationen, hvor Qualcomm selv naturligvis bagatelliserer forskellene. Arm bemærker generelt en forskel på 1% præstation for hver 5ns latenstid til DRAM, hvis forskellene er store, kan det opsummere en mærkbar forskel.

Selv om det i sig selv er en meget god forbedring, er det stadig lidt bag designene fra HiSilicon, Apple og Samsung. Så mens Qualcomm stadig er den sidste af flokken med hensyn til dets hukommelsessystem, er det ikke længere bagud med en så stor margin.

Dårlig hukommelseslatens er ikke noget, der kommer meget op i benchmarking, men Qualcomm gjorde det klart, at mange der blev gjort arbejde for at lindre nogle af problemerne fra tidligere generationer, og det er uden engang at støtte LPDDR5 hukommelse.

Du kan kalde mig AI

Kilde: Daniel Bader / Android Central

Et af de vigtigste forbedringsområder i chippen er, hvordan den behandler maskinlærings- og AI-tunge opgaver. Snapdragon 865 hævder at have en AI-motor dobbelt så kraftig som 855 og rammer 15 billioner operationer pr. Sekund. Det er helt sikkert et forbløffende tal, men det oversættes ikke altid ordentligt med hensyn til virkelighedens ydeevne, hovedsageligt fordi brugssagerne til denne slags apps og operationer er venlige af begrænset.

XDA-Developers har et rigtig godt overblik af hvordan Qualcomm fjernede sådanne utrolige tal fra sin femte generation AI-motor. Jeg kan godt lide deres konklusion, som det opsummerer hvorfor AI-motoren er vigtig, hvis ikke nu i fremtiden:

Tjenester, der involverer oversættelse, genkendelse og mærkning af objekter, forudsigelser om brug eller anbefaling af emner, naturlig sprogforståelse, taleparsering og så videre får fordelen ved at arbejde hurtigere og forbruge mindre strøm. At have et højere beregningsbudget muliggør også oprettelse af nye brugssager og oplevelser og flytning af processer, der tidligere fandt sted i skyen til din enhed. Mens AI som udtryk tidligere har været brugt på tvivlsomme, vildledende og endda fejlagtige måder (selv af OEM'er), mange af dine tjenester, du nyder i dag, er i sidste ende afhængige af maskinlæringsalgoritmer i en eller anden form eller en anden.

Hvorfor disse benchmarks ikke er hele historien

Kilde: Daniel Bader / Android Central

Jeg elsker ikke benchmarks, hvorfor denne artikel er i det format, den er i. Jeg vil være den første til at indrømme, at andre mennesker gør det bedre og mere omfattende, end jeg gør, og jeg vælger at være tvivlsom om, hvordan syntetiske eller endda organiske benchmarks rent faktisk oversættes til virkelige oplevelser i smartphone-rummet.

Jeg giver dig et eksempel: Snapdragon 670, der findes i Google Pixel 3a $ 399, oversættes ikke til påviseligt dårligere ydeevne end den Snapdragon 855-drevne Pixel 4. Mellemklasse er ikke længere et beskidt ord, og Snapdragons i 600 og 700-serien er mere end i stand til at få jobbet gjort for langt de fleste mennesker.

Så imponerende som de er, er disse syntetiske benchmarks, der næppe berører overfladen af, hvad en kommercielt frigivet telefon bliver bedt om at gøre og er i stand til at gøre

Så betyder det, at de iterative forbedringer, vi ser i Snapdragon 865, ikke er bemærkelsesværdige? Selvfølgelig ikke - da arbejdsbelastninger bliver mere komplicerede, bevæger de sig fra CPU'en og over på GPU og DSP (AI Engine), disse avancerede chips muliggør mere specialiserede og mindre generaliserede opgaver. Tænk på tunge beregningsfotograferingsevner eller realtidsoversættelse, ting der kun siver ned til platformene i 600 og 700-serien et år eller to, efter at de debuterede på 800'erne.

Den syntetiske benchmarkfortælling berører heller ikke mange af de andre områder, hvor Snapdragon 865 udmærker sig: 5G, der kommer på alle enheder (på godt og ondt) og især kamera evner. Disse evalueringer bliver nødt til at vente, indtil vi får de første smartphones, der kører Snapdragon 865, sandsynligvis i slutningen af ​​Q1 med Galaxy S11-serien.

I betragtning af den varme, men dæmpede modtagelse tildelt Snapdragon 855 i år, er dagene med massive årlige præstationsstød mellem generationer sandsynligvis forbi. I stedet er det de ting på kanten, der er mest spændende, og jeg kan ikke vente med at tage at billede i de kommende måneder.

Daniel Bader

Daniel Bader er administrerende redaktør for Android Central. Mens han skriver dette, er et bjerg af gamle Android-telefoner ved at falde på hans hoved, men hans store dansker vil beskytte ham. Han drikker alt for meget kaffe og sover for lidt. Han spekulerer på, om der er en sammenhæng.