I benchmark Galaxy Note 7 e i nerd che adorano odiarli

Nonostante abbia subito un massiccio richiamo al momento, il Galaxy Note 7 è ancora uno dei migliori telefoni sul mercato. E c'è qualcosa di profondo nel cuore di ogni nerd di smartphone che brilla ogni volta che possiede un telefono che qualcuno con qualsiasi autorità definisce "il migliore" e difende tale affermazione in un modo concorde.

Nota 7 fan hanno avuto quella sensazione di essere stati portati via di recente dalla gente intelligente di XDA-Developers. Attraverso una combinazione di test, parametri di riferimento e strumenti di monitoraggio del "mondo reale", gli scrittori XDA hanno raccontato una storia di prestazioni balbettanti che sembravano dimostrare che questo nuovo telefono luccicante in qualche modo non meritava lo spazio in cima all'heap, quindi molti recensori di tecnologia lo hanno inserito.

È una lettura divertente, soprattutto se capisci solo cosa stai leggendo. Prima di considerare di riportare il tuo Note 7 nel negozio da cui proviene con quella catapulta fatta in casa, ci sono alcune cose che dovresti sapere sui benchmark e sui test del "mondo reale".

Le app di benchmarking sono inutili

Se usi un'app di riferimento per dirti quanto è bello o terribile il tuo telefono, non otterrai nulla da nessuna parte vicino a un'immagine completa. Le app di benchmark erano eccellenti per la risoluzione dei problemi, esistenti in modo da poter vedere se nel tempo si sono verificati perdite di prestazioni o danni all'apparecchiatura. Oggi molti produttori implementano un codice speciale che obbliga l'hardware a funzionare al di sopra delle soglie tipiche quando viene utilizzata un'app benchmark, che altera irrimediabilmente i risultati. Stai misurando una versione dell'hardware a cui altrimenti il ​​tuo telefono non ti consente mai di accedere, quindi non ottieni altro che un tentativo di ottenere il punteggio più alto quando esegui app di benchmark oggi.

Se vedi un Note 7 che si esibisce ovunque vicino a un Nexus 6P, considera quante altre cose sta facendo Note 7.

Quelle modifiche al software che alterano le prestazioni portano a un problema molto più grande. Quando stai confrontando un Galaxy Note 7 con una Moto Z Droid Edition e un Nexus 6P, stai confrontando tre diverse esperienze che non faranno mai la stessa cosa allo stesso tempo. Samsung e Lenovo hanno entrambi attività in background che non possono essere replicate sul Nexus 6P. Funzionalità che non possono essere disabilitate per ottenere un confronto 1: 1 delle prestazioni del software. Se vedi un Note 7 che si esibisce ovunque vicino a un Nexus 6P, considera quante altre cose sta facendo Note 7. Meglio ancora, dai un'occhiata alla recensione Anandtech incommensurabilmente più approfondita delle prestazioni di Note 7 rispetto a tutti gli altri telefoni ad alte prestazioni e vedi come supera regolarmente il Nexus 6P.

Esiste un valore nel test per cose come i frame rilasciati e la segnalazione su tali frame rilasciati nel contesto è una cosa importante da fare quando il tuo obiettivo è educare e informare i potenziali acquirenti. È difficile dire che è quello che è successo con la presentazione di XDA, data la mancanza di contesto o un confronto adeguato. Il Note 7 rilascia più o meno frame rispetto al Galaxy S7 o S7 Edge? Potrebbe trattarsi di un problema esclusivo della variante Snapdragon di questo modello? Sta succedendo perché la nuova interfaccia utente Grace di Samsung è stata scaricata e potrebbe essere riparata in un futuro aggiornamento? Nessuna di queste domande ha una risposta, perché l'obiettivo non era quello di informare.

Raccolta delle ciliegie nel "mondo reale"

Non molto tempo dopo che XDA pubblicò le loro scoperte, un post di Vlad Savov di The Verge tentò di applicare un po 'di realtà all'esplosione iniziale di Internet. In questo Vladitorial, è stato sottolineato che alcuni dei risultati su XDA non erano in realtà risultati. In particolare, affermare che una differenza di 200 ms nel lancio di app fosse un esempio di "prestazioni imbarazzanti" è sciocco e non rappresentativo di come le persone usano effettivamente gli smartphone. XDA ha risposto con altri dati, cercando di rafforzare la loro posizione. L'argomentazione contraria, secondo cui un ritardo di 200 ms si sommerebbe nel tempo a un telefono in modo tale che un utente di Note 7 afferrerebbe un Nexus 6P e si stupirebbe di quanto "ritenga" più veloce è applicato dalle GIF che dimostrano tali differenze di prestazioni.

La cosa affascinante di questa dimostrazione è la raccolta delle ciliegie. Il software Samsung è tutt'altro che perfetto; infatti, dopo aver disinstallato 13 app dal mio nuovo brillante Verizon Note 7 e averne trovate altre otto che non riesco a disabilitare, voglio distruggere la mia con un martello proprio ora. Seduto quel telefono vicino al mio Nexus 6P appena riempito di Nougat, ci sono assolutamente aspetti di questa Nota 7 che sono dimostrabilmente più veloci. La fotocamera, ad esempio, avvia di routine un secondo più velocemente. Non sarebbe difficile scegliere una mezza dozzina di esempi, crearli in GIF e scrivere qualcosa che assomigli a quanto sia superiore il Note 7 al Nexus 6P.

Il fatto è che non è così che funzionano i test nel mondo reale. Il punto dei test nel mondo reale, come suggerisce il nome, è quello di offrire esempi di prestazioni di come l'intero telefono funziona come se un utente "medio" usasse il telefono. Usare questi dati per confrontare un'esperienza con un'altra è complicato, invece di offrire un confronto 1: 1 del software in quanto funziona, stai offrendo un confronto 1: 1 dell'esperienza, come si sente a usare i telefoni. Mostrare come si carica un menu di condivisione, specialmente quando quei telefoni non sono chiaramente configurati allo stesso modo con le stesse app, non corrisponde davvero a quella descrizione. A meno che, ovviamente, tu non stia spingendo una narrazione diversa.

Strumenti migliori e analisi effettive

Il vero difetto di tutto ciò è un presupposto errato del fatto che Samsung Note 7 e Google Nexus 6P siano costruiti per lo stesso scopo. Chiari e semplici, non lo sono. L'esperienza Nexus di Google si è evoluta da Clean Developer Kit a una dimostrazione del progetto Open Source Android con una manciata di extra. I telefoni Samsung non hanno iniziato con AOSP da molto tempo e non c'è motivo per la società di prendere in considerazione un altro percorso in questo momento.

I telefoni Samsung sono basati su Android, non su Android.

I telefoni Samsung sono basati su Android, non su Android. Di conseguenza, i telefoni Samsung sono ottimizzati nel modo che ritengono più importante. Al momento, queste ottimizzazioni servono a offrire funzionalità Samsung uniche, come la fotocamera Samsung, Samsung Pay e le esclusive funzioni S Pen. Android, con questo intendo il sistema operativo, non pone la priorità su queste cose. Nelle ultime versioni ci si è concentrati su cose come il consumo della batteria quando non si utilizza il telefono, la sicurezza in ogni momento e un'interfaccia utente coerente a 60 FPS. È difficile sostenere che una di queste cose non sia importante, ma né Android di Samsung né Android di Google danno priorità a tutte queste cose.

In realtà, ciò a cui si riduce è ciò che l'utente pone la priorità. Se vuoi il telefono più sicuro con un'interfaccia liscia e slegata, probabilmente vorrai annunciare presto Google e HTC. Se ti preoccupi di una fantastica fotocamera e software creati per offrirti una tonnellata di funzionalità che potresti utilizzare o meno, il Galaxy Note 7 di Samsung è difficile da battere in questo momento. Cercare di rivendicare il Note 7 è in qualche modo sottoperformante perché non si comporta come un telefono non è stato costruito per comportarsi come se fosse ridicolo, non importa quanto tu tenti di avvolgere quella narrativa nei benchmark.