Hem yttranden Benchmarks räcker inte, men inte heller erfarenheter

Benchmarks räcker inte, men inte heller erfarenheter

Video: KEF Reference Series: The benchmark of benchmarks (November 2024)

Video: KEF Reference Series: The benchmark of benchmarks (November 2024)
Anonim

VISA ALLA BILDER I GALLERI

SAN FRANCISCO - För ett år sedan, efter att jag deltog i Intel Developer Forum (IDF) 2012, ställde jag en fråga inspirerad av saker som jag hade hört från de olika presentatörerna och PR-personerna på utställningen: "Hur jämför du upplevelser?" Uppfattningen som människorna svävde då var att det som verkligen betyder något om ett system är hur bra det fungerar, inte hur bra det gör på syntetiska prestandatester. Idag har tydligen inte mycket förändrats.

Sedan jag fördjupade mig ännu en gång i Intel-världen den här veckan, har jag befunnit mig stå inför en pågående spärr av insisterande på att riktmärketester är passé i bästa fall och bedrägligt i värsta fall, och att fokusering på användningen av slutprodukten är det som är mest värdefullt till konsumenterna - eller åtminstone vad som borde vara. En instans var särskilt hög, och till och med gick så långt som att dissekera koden för några viktiga bitar av benchmarking-programvara (nej, vi fick aldrig veta exakt vilket) för att analysera orsakerna till att de inte kunde lita på i första hand.

Konstigt nog, gång på gång under utställningen, har Intel-representanter pratat om hur denna processor är så och så procent snabbare än den processorn, hur vi borde se poäng men hur mycket bättre den här gången. Och jag blev inbjuden till ett evenemang på Intel-campuset i Santa Clara specifikt i syfte att köra tester på företagets nya plattform för behandling av Bay Trail-surfplattor. Uppenbarligen är benchmarkingresultaten fortfarande viktiga då och då.

På en nivå är Intel helt korrekt i den här tankegången. Nej, referensresultat berättar inte allt om en produkt, och de enbart kommer aldrig att vara hur någon bestämmer sig för att köpa den här enheten snarare än den. Ingen, från teknikföretag till teknisk granskare till teknikonsumenter, bör lita på dem exklusivt, även om de vet hur de ska tolka dem på rätt sätt.

Men jämförelsepoäng är användbara, kanske till och med viktiga, för den punkt där frågor om "upplevelser" slutar vara relevanta. Inte alla kanske vet om resultatet de ser av en slags aktivitet faktiskt är bra eller bara okej, eller om ett visst spel på det ser orimligt ryckigt ut eller om det bara är det bästa de kan förvänta sig för de pengar de vill betala.

Poäng från ett objektivt - eller pussel, till och med en visserligen icke-objektiv - tredje part utgör den avgörande sista delen av inköpspusslet. Om två surfplattor verkar spela video på exakt samma sätt, och det är vad du bryr dig om, vilket ska du välja? Om du vet att du vill spela spel men inte personligen känner FRAPS från en frappuccino, ser inte en lista med jämförbara bildräntor det bästa sättet för dig att få det bästa systemet till bästa pris?

VISA ALLA BILDER I GALLERI

I slutändan berättar erfarenheter inte allt heller. Att fokusera på dessa, precis som att fokusera på riktmärken, ger en ofullständig bild som kan inspirera till mer förvirring än tydlighet. Att uppmärksamma en slutförd produkt är vettigt av många skäl, främst bland dem att det gör ett företags ganska esoteriska produkter lättare för företaget att sälja och lättare för konsumenten att förstå.

Medan jag var i Santa Clara för Bay Trail benchmarking-evenemanget fick jag också ett spännande bakom kulisserna en glimt av Intels "User Experience Lab", där en serie tester och mätningar, som omfattar allt från datorer till robotar till en hemi-anekoisk kammaren används för att bedöma användbarheten för systemets komponenter. Ljudkvaliteten, visningsvinklarnas bredd och känslighet för pekskärmen är viktiga frågor som påverkar den dagliga användningen, och efter att ha sett laboratoriet hade jag en mycket tydligare förståelse för logiken bakom Intels drivande upplevelser idag.

Naturligtvis, vad som händer i ett testlaboratorium och vad som händer i ditt vardagsrum är inte alltid (om någonsin) samma sak; mycket fler variabler spelar in när du har fått hem hemmet, och inget företag kan testa för allt du kan göra med din dator. Intels rigorösa vetenskapliga applikationer är ett bra ställe att börja på, men som testresultatet är så många personer på Intel så ofta decry, inte ett bra ställe att stoppa.

I ett datorlandskap som förändras varje dag och, ännu viktigare, blir mer och mer mainstream för varje förbipasserande generation, är det bra att flytta från riktmärken till upplevelser. Men tills det finns ett repeterbart sätt att bokstavligen benchmarka dessa upplevelser, så att den intresserade konsumenten inte bara vet vad som är viktigt utan varför det är viktigt och hur det kan hjälpa, måste erfarenheter och riktmärken arbeta tillsammans för att hjälpa konsumenterna att få informationen, svaren och system de behöver.

VISA ALLA BILDER I GALLERI

Benchmarks räcker inte, men inte heller erfarenheter