Hur vi testar bärbara datorer

Den bärbara granskningsprocessen på PCMag.com bedriver kärntraditioner som går tillbaka till inrättandet av PC Labs 1984: Vi jämför varje system med andra i sin kategori på grundval av pris, funktioner, design och interna prestanda tester..

För att utvärdera prestanda använder vi en serie mjukvarubaserade benchmarktest och verkliga applikationer och spel, noggrant utvalda för att lyfta fram styrkor och svagheter i den testade PC: s blandning av komponenter. Denna utvärdering sträcker sig från CPU och minnessubsystemet till maskinens lagringshårdvara och grafik-kisel.

I vissa fall använder vi standardiserade test skapade av etablerade benchmark-utvecklare. Vi har också skapat våra egna tester där det behövs. Vi utvärderar regelbundet nya benchmarklösningar när de träffar marknaden och granskar vårt testförfarande vid behov för att säkerställa att vi exakt kan spegla effekterna av den senaste tekniken.

Vår bärbara testning delas upp i tre grova testklasser: produktivitetstest, grafikprovning och en batteritid. Här är en uppdelning av var och en.

Produktivitetstest

PCMark 10

Vår första uppgift är att utvärdera en bärbar dators vardagliga produktivitetsprestanda med hjälp av UL: s PCMark 10-riktmärke, som simulerar verkliga produktivitet och arbetsflöden för innehållsskapande. (UL, eller Underwriters Labs, förvärvade Futuremark, tillverkaren av de långvariga PCMark- och 3DMark-riktmärkena.)

Vi använder PCMark 10 för att utvärdera den totala systemprestanda för kontorscentriska uppgifter som ordbehandling, kalkylarkarbete, webbläsning och videokonferenser. Testet genererar en egen numerisk poäng; högre siffror är bättre och är främst meningsfulla jämfört med varandra.

Vi kör den viktigaste testsviten som medföljer programvaran, inte Express- eller Utvidgad version. Observera att allt annat lika kommer en högre skärmupplösning att undertrycka systemets prestanda på PCMark 10. (Ju fler pixlar du vill trycka på, desto fler resurser krävs.)

PCMark 8-lagring

Vi utvärderar sedan hastigheten på den bärbara datorns huvudstart-enhet med hjälp av ett annat UL-riktmärke, PCMark 8. Denna testsvit har en dedikerad PCMark 8-lagringsundertest som rapporterar en proprietär numerisk poäng…

Liksom med PCMark 10 är högre siffror bättre. Resultaten från bärbara datorer med banbrytande hårddiskenheter (SSD) tenderar att sammanfogas nära detta test.

Cinebench R15

Nästa i rad är Maxons CPU-crunching Cinebench R15-test. Vi kör detta test i inställningen All Cores. Detta test härrör från Maxons Cinema 4D-modellerings- och renderingsprogramvara och är ett CPU-hästkrafttest. Den är helt gängad för att använda alla tillgängliga processorkärnor och trådar. Tänk på det som en all-out processor deadlift.

Cinebench betonar CPU snarare än GPU för att göra en komplex bild. Resultatet är en egenutvecklad poäng som indikerar datorns lämplighet för processorintensiva arbetsbelastningar, när de används med mjukvara som är helt gängad.

Handbroms 1.1.1

Cinebench är ofta en bra förutsägare för vår Handbrake-videoredigeringsversion. Detta är en annan tuff, gängad träning som är mycket CPU-beroende och skalar väl när du lägger till kärnor och trådar.

I det här testet satte vi ett stoppur på testsystemen när de transkoderar ett standardklipp på 12 minuter av 4K-video (den öppna källfilmen Blender-demo kortfilm Tears of Steel ) till en 1080p MP4-fil. Vi använder förinställningen Fast 1080p30 i version 1.1.1 av Handbroms-appen för det här testade testet. Lägre resultat (dvs. snabbare tider) är bättre.

Adobe Photoshop CC Photo Editing Test

Vårt sista produktivitetstest är ett anpassat Adobe Photoshop-bildredigeringsindex. Med en tidig utgåva av 2018 av Creative Cloud-versionen av Photoshop tillämpar vi en serie komplexa filter och effekter (damm, vattenfärg, målat glas, mosaikplattor, extrud och flera oskärpa effekter) på en PCMag-standard JPEG-bild. (Vi använder ett skript som körs via en åtgärdsfil av egen tillverkning.) Vi tid för varje operation och, i slutet, lägger vi till den totala körningstiden. Liksom med handbromsen är lägre tider bättre här.

Photoshop-testet betonar CPU, lagringsundersystem och RAM, men det kan också dra fördel av de flesta GPU: er för att påskynda processen att använda filter. Så system med kraftfulla grafikchips eller kort kan få ett ökat resultat.

Grafikprestanda

Att bedöma grafikprestanda kräver användning av tester som är utmanande för alla system som ändå ger meningsfulla jämförelser över hela fältet. Vi använder några riktmärken som rapporterar egna poäng och andra som mäter ramar per sekund (fps), den frekvens som grafikhårdvaran återger ramar i en sekvens, vilket översätter till hur slät scenen ser ut i rörelse.

Syntetiska tester: 3DMark och Superposition

Det första grafikprovet är UL: s 3DMark. 3DMark-sviten består av en mängd olika undersökningar som mäter relativ grafikmuskel genom att göra sekvenser av mycket detaljerad 3D-grafik i spelstil. Många av dessa tester betonar partiklar och belysning.

Vi kör två olika 3DMark-undersökningar, Sky Diver och Fire Strike, som är anpassade för olika typer av system. Båda är DirectX 11-riktmärken, men Sky Diver är lämplig för bärbara datorer och mellanstora datorer, medan Fire Strike är mer krävande och skapade för avancerade datorer för att stryka sina saker. Resultaten är egna poäng.

I vår grafikblandning finns också ett syntetiskt grafiktest, den här gången från Unigine. Precis som 3DMark, Superposition-testet återges och panoreras genom en detaljerad 3D-scen och mäter hur systemet hanterar. I detta fall inträffar återgivningsåtgärden i företagets namngivna Unigine-motor och erbjuder ett annat 3D-arbetsbelastningsscenario än 3DMark. Detta ger en andra åsikt om maskinens grafiska förmåga.

Vi presenterar två Superposition-resultat som körs på 720p Low och 1080p High-förinställningarna. Poängen rapporteras i ramar per sekund, högre bildhastigheter är bättre. För system med lägre ände är upprätthållande av minst 30 fps det realistiska målet, medan kraftfullare datorer helst bör uppnå minst 60 fps vid testupplösningen.

Real-World Gaming Test

De syntetiska testerna ovan är användbara för att mäta allmän 3D-grafikfärdighet, men det är svårt att slå full detaljhandelsvideospel för att bedöma spelprestanda. Far Cry 5 och Rise of the Tomb Raider är båda moderna titlar med hög trohet med inbyggda riktmärken som illustrerar hur ett system hanterar verkliga videospel i olika inställningar.

Dessa spel körs på både måttligt och maximalt förinställt grafikkvalitet i benchmarkingverktyget. (Dessa förinställningar är Normal och Ultra för Far Cry 5, Medium och Very High för Rise of the Tomb Raider.) Vi testar som standard vid 1080p om möjligt och (om den bärbara datorns ursprungliga skärmupplösning är högre eller lägre) på skärmens ursprungliga upplösning att bedöma prestanda för ett givet system.

Dessa resultat tillhandahålls också i ramar per sekund. Far Cry 5 är ett DirectX 11-baserat spel, medan Rise of the Tomb Raider kan vändas till DirectX 12-läge, vilket vi gör för detta riktmärke.

Test av batteritid

Slutligen utför vi ett videouppspelningsbaserat batteriundersökningstest, som stöder alla operativsystem, för att uppskatta i relativ mening hur länge den bärbara datorn kommer att hålla sig borta från ett eluttag. Vårt rundown-test innebär att spela en loopad 720p-version av Tears of Steel (nämnts tidigare) , sparad på den bärbara datorns lagringsenhet i MP4-format. Om filen inte passar på systemets lokala lagring, kör vi videon från ett SD-kort eller ett USB-minne.

Innan vi startar testet, sätter vi på systemets energisparläge, sveper skärmens ljusstyrka till 50 procent, ökar ljudvolymen till 100 procent och inaktiverar anpassningsbar skärmens ljusstyrka. Trådlösa radioapparater, bakgrundsbelysning på tangentbordet och eventuell belysning är släckt. Vi startar sedan testet och kör det så länge ett fulladdat batteri varar, vanligtvis till den punkt att systemet vilar på under 5 procent batterikapacitet (som föreskrivs i den kritiska batteriåtgärden som vi också ställer in i Power Options). Om den bärbara datorn har mer än ett batteri, kommer vi att utföra ett separat, andra rundowntest med båda batterierna installerade.

Att utvärdera batteriets prestanda är svårt, eftersom resultaten kan variera mycket beroende på vilka uppgifter som utförs. (Tungt spelande av batteriet, för en sak, kommer att leverera mycket kortare tider.) Men i allmänhet anser vi att ett system ska erbjuda hela dagen beräkning om det tar mer än åtta timmar på vårt batteritestningstest.

Specialfall: macOS, Chromebooks, mobila arbetsstationer

Vi kör inte alla ovanstående tester på alla bärbara datorer. Vi kör bara Far Cry 5 och Rise of the Tomb Raider på bärbara datorer som är specifikt designade för spel, utrustade med en dedikerad grafikprocessor. Och vi använder inte PCMark, 3DMark eller Superposition för att testa Apple-bärbara datorer, eftersom dessa tester inte har någon MacOS-version. För att utvärdera vissa specialiserade delmängder av bärbara datorer, till exempel arbetsstationer, Chromebooks och ARM-baserade system, kompletterar vi våra standardtest.

Chromebooks

Med Chromebooks, till exempel, av ovanstående tester utför vi bara batteritestningstestet, eftersom det är det enda som är kompatibelt med Chrome OS. Vi kör batteritestet med två viktiga skillnader från ovanstående procedur: (1) Vi använder en annan källfil med annan upplösning (en DVD-rip av full Lord of the Rings- trilogin, loopad) lagrad (när det är möjligt) på Chromebooks interna lagring, och (2) kör vi testet med Wi-Fi på och Chromebook ansluten till en lokal router. Det senare valet är att återspegla det normala driftsättet för Chromebooks; en Chromebook är av begränsat verktyg med Wi-Fi avstängd.

Sedan kör vi riktmärkena CrXPRT och WebXPRT, från Principled Technologies, för att hjälpa oss göra jämförelser mellan Chromebooks. (Eftersom WebXPRT är ett webbaserat test som kan köras på nästan vilken dator som helst, använder vi det också för att testa bärbara datorer med ARM-processorer.) Dessa är tester med en enda klick utan inställningar för att justera, och de rapporterar tillbaka egna poäng som bara är meningsfulla relativt varandra.

Bärbara datorer för arbetsstation

Med bärbara datorer på arbetsstationen kör vi alla ovanstående tester och kompletterar dem med några arbetsstationsspecifika åtgärder. Dessa specialiserade tester inkluderar multimedia-återgivningsverktyget POV-Ray (för en strålspårningssimulering). Vi kör också SPECviewperf-sviten och laddar tre "viewets" för apparna Creo, Maya och SolidWorks för att mäta hur arbetsstationsmaskinen hanterar manipulering av relevanta filer i dessa tre seminala arbetsstationsprogram. POV-Ray-resultaten rapporteras som tid till slutförande av testuppgiften, och SPECviewperf-resultat rapporteras i ramar per sekund.