4K all'arrembaggio
Intel ha snocciolato diversi dati per quantificare l'importanza delle ottimizzazioni alla parte multimediale. L'azienda ha inoltre commissionato un sondaggio su 2400 utenti per sostenere le sue affermazioni sul fatto che le ottimizzazioni multimediali apportano il beneficio prestazionale più grande per l'utente medio.
Intel ha indicato che più di 50 prodotti con pannello nativo 4K saranno dei notebook nella generazione Kaby Lake. Altri nuovi tipi di contenuti in streaming, come i video a 360 gradi e il multi-streaming, si stanno diffondendo. Il passaggio al 4K è in corso: gli analisti dicono che oltre 100 milioni di dispositivi UHD 4K saranno nel mercato PC entro il 2020.
I codec VP8 e AVC esistenti non sono così efficienti con i video ad alta definizione, quindi i nuovi codec che riducono la quantità di bandwidth richiesto per lo streaming di video HD e 4K ingombranti (tramite la doppia compressione) stanno diventando più popolari. I nuovi codec richiedono più potenza di calcolo per la visualizzazione. VP9, che fa lo streaming di video senza buffering, sta divenendo uno dei codec più rilevanti. YouTube ha fatto lo streaming di oltre 25 miliardi di ore di video HD (720p e superiore) con VP9. Anche HEVC sta guadagnando terreno e l'aggiunta di HEVC accelerato dall'hardware e della codifica/decodifica VP9 è un pezzo fondamentale della strategia mobile di Intel.
Intel afferma che l'aggiunta dell'accelerazione hardware HEVC a 10 bit aumenta l'autonomia durante lo streaming 4K del 75% - fino a 9,5 ore. L'azienda pensa che un utente possa vedere fino a 7 ore di video 4K a 360 gradicon una singola carica.
Architettura multimediale Gen9
Intel ha migliorato il suo media engine per aumentare le prestazioni durante lo streaming video e altri carichi di lavoro multitasking esigenti, che ha descritto come "mega-tasking". Per un tipico carico mega-tasking Intel intende, per esempio, il gaming mentre si fa lo streaming su Twitch, cosa che richiede di catturare il gameplay mentre simultaneamente si fa codifica e decodifica.
La chiave per aumentare le prestazioni durante i carichi pesanti è disaccoppiare alcuni dei processi, come codifica e decodifica, dalla pipeline di rendering principale. L'azienda usa la stessa architettura base del core grafico Gen9 che ritroviamo sulla piattaforma Skylake, anche se con alcuni miglioramenti. I tre subslice nel mezzo ospitano EU, cache, sampler 3D e sampler media e condividono le risorse a sinistra (un-slice) mentre gestiscono gran parte del lavoro di rendering.
Intel si è focalizzata su ottimizzazioni mirate agli engine MFX (decode/encode) e VQE, che sono indicate in verde. Queste unità sono fuori della pipeline di rendering e operano in modo indipendente dai subslice, aumentando il parallelismo. Durante una sessione di gioco, per esempio, i subslice gestiscono il lavoro di rendering mentre l'engine MFX si occupa delle operazioni di codifica/decodifica. Ogni collezione di tre subslice funziona come se avesse uno slice più grande e Intel può variare il numero degli slice per regolare le prestazioni in vari modelli specifici.
Il Multi-format Codec (MFX) garantisce molteplici funzioni come il supporto ai vecchi codec VP8 e AVC. Intel ha anche aggiunto il pieno supporto hardware per la decodifica/codifica HEVC 10 bit, la decodifica VP9 8/10 bit e la codifica VP9 a 8 bit. Skylake usava un'implementazione ibrida che coinvolgeva sia la CPU che la GPU per processare alcuni codec, ma il processing totalmente accelerato dall'hardware di Kaby Lake riduce l'uso della CPU, e perciò il consumo, durante la riproduzione video.
Intel ha anche aggiunto il supporto HDR (High Dynamic Range) al suo engine VQE, che supporta il processing video e il miglioramento dei contenuti con caratteristiche come la correzione e il miglioramento del colore, il miglioramento della tonalità della pelle e la riduzione del rumore.
L'impatto prestazionale netto è impressionante: quello che definiamo engine grafico Gen9+ (un miglioramento rispetto alla Gen9 di Skylake) supporta fino a 8 flussi 4Kp30 AVC e HEVC simultanei; e gestisce più operazioni di decodifica 4Kp60 HEVC in tempo reale a 120 Mb/s.