Grandi cambiamenti
Abbiamo rimpiazzato GUIMark 2 Flash, GUIMark Java ed Encog Silverlight con cinque test da RIABench Flash, Java e Silverlight. Abbiamo inoltre aggiunto RIABench JavaScript ai nostri test JavaScript, un cambiamento atteso da tempo per JSBenchmark e V8. RIABench consiste di 10 test separati, ma due non sono disponibili per tutte e quattro le tecnologie, e uno in questo momento mostra un errore 404; Safari ha problemi con un test e IE9 con un altro.
Abbiamo dovuto rimpiazzare temporaneamente Dromaeo DOM con Acid3 perché il primo ha dato problemi con i browser basati su WebKit sotto Windows. Abbiamo aggiunto un altro test CSS per bilanciare il benchmark Maze Solver CSS3.
Lo stress test dell'accelerazione hardware di Mozilla è stato rimpiazzato con WebVizBench, che non presenta limiti nel punteggio massimo. Abbiamo aggiunto un'osservazione generale sulla reattività nel test sull'uso della memoria con 40 schede. E infine, abbiamo trovato un test di sicurezza che non è superato da nessuno dei contendenti.
I nostri test non sono più inseriti all'interno dei gruppi "core", "osservazione", "datati" e "quarantena", perché non è più necessario. Il grande rinnovamento della suite di test e l'introduzione di punteggi compositi per ogni categoria rendono tale operazione superflua.
Suite di test
La tabella elenca tutti e 34 i benchmark (66 test individuali) nella nostra suite, insieme al numero di versione, il link (dove possibile) e il numero di interazioni eseguite.
| Nome Benchmark | Sessioni |
|---|---|
| Test prestazioni (24 Benchmark, 56 Test) | |
| Tempo d'avvio a freddo: 1 Tab | 3 |
| Tempo d'avvio a caldo: 1 Tab | 3 |
| Tempo d'avvio a freddo: 8 Tab | 3 |
| Tempo d'avvio a caldo: 8 Tab | 3 |
| Tempo caricamento pagine senza cache (test su 9 pagine) | 5 |
| Tempo caricamento pagine con cache (test su 9 pagine) | 5 |
| RIABench JavaScript (5 Tests) | 3 |
| Mozilla Kraken v1.1 | 2 |
| Google SunSpider v0.9.1 Mod | 2 |
| FutureMark Peacekeeper 2.0 | 2 |
| Acid3 | 5 |
| Maze Solver | 5 |
| CSS Stress Test and Performance Profiling - Tom's Hardware | 2 |
| GUIMark 2 HTML5 (3 Test) | 3 |
| Asteroids HTML5 Canvas 2D And JavaScript | 2 |
| HTML5 Canvas Performance Test | 2 |
| Facebook JSGameBench v4.1 | 2 |
| Psychedelic Browsing | 2 |
| WebVizBench | 2 |
| Mozilla WebGL FishIE | 2 |
| WebGL Solar System | 2 |
| RIABench Flash (5 Test) | 3 |
| RIABench Java (5 Test) | 3 |
| RIABench Silverlight (5 Test) | 3 |
| Benchmark Efficienza (4 Benchmark/Test) | |
| Uso Memoria: 1 Tab | 3 |
| Uso Memoria: 40 Tab | 3 |
| Gestione Memoria: -39 Tab | 3 |
| Gestione Memoria: -39 Tabs (dopo 2 minuti extra) | 3 |
| Benchmark Affidabilità (1 Test) | |
| Pagine caricate correttamente | 3 |
| Benchmark Reattività (1 Test) | |
| Reattività generale sotto carico | 3 |
| Security Benchmarks (1 Test) | |
| BrowserScope Security | 1 |
| Benchmark di Conformità (3 Benchmark/Test) | |
| Ecma test262 | 1 |
| Peacekeeper 2.0 HTML5 Capabilities | 1 |
| HTML5Test.com | 1 |
Metodologia
Abbiamo riavviato il computer e atteso che entrasse in idle prima di avviare i benchmark. La maggior parte dei nostri punteggi finali è una media di diverse sessioni, e ne abbiamo fatte di più per i test più brevi o con più variabilità.
Tutti i valori anomali (dovuti di solito a problemi di rete) sono stati rimossi o il test ripetuto. I dettagli delle singole metodologie e le informazioni riguardo il punteggio composto sono descritte nelle pagine dei benchmark.