Una rivisitazione del set-top box di base è stata avviata da app per streaming, giochi, XR e altre tecnologie. I progettisti di system-on-chip (SoC) e i produttori di elettrodomestici stanno lavorando con metodi di intelligenza artificiale per migliorare l’alta definizione o addirittura. Programmi a definizione standard in modo realistico e naturale.
È così che va. Un algoritmo confronta due campioni video o immagini di una scena simile: una versione a piena risoluzione e una volutamente ridotta. Invece di allungare un’immagine su una batteria più ampia di pixel (causando la pixelizzazione) o riempire i nuovi pixel estrapolando le informazioni da quelli vicini (bordi sfocati), questi due metodi causano la sfocatura dei bordi. Gli algoritmi e i processori AI possono determinare come ricostruire i dati persi confrontando i due e analizzandoli.
Successivamente, le tecniche di ricostruzione vengono utilizzate nel programma che stai guardando per riempire tutti i dettagli che non erano visibili sullo schermo ma che potrebbero essere stati presenti nella realtà quando è stato girato, che ironicamente potrebbe essere un episodio di Law and Order in in cui la polizia usa un frammento di teschio e un pezzo di carta bruciato per ricreare una scena del delitto.
Come ci si potrebbe aspettare, raggiungere questo livello di super risoluzione computazionale non è un compito da poco. Il motore di inferenza interno di una TV digitale (DTV) o di un set-top box (STB) dovrebbe avere accesso a migliaia di campioni ed essere in grado di distinguere tra una tempesta di neve e una dissolvenza creativa. Dovrebbe anche portare a termine questa impresa senza scatenare il ronzio dei fan mentre lo fa in tempo reale.
Tuttavia, è semplice vedere come questi metodi modificheranno profondamente l’home entertainment quando verranno migliorati.
Questo tipo di innovazione di programmazione, a mio avviso, modificherà il modo in cui clienti, sviluppatori e produttori si avvicinano agli STB. Ogni anno vengono forniti in tutto il mondo oltre 200 milioni di DTV e almeno altrettanti STB, una categoria che include set-top box tradizionali di provider via cavo o satellitari, dispositivi multimediali in streaming come Roku Express e altri che combinano entrambi. Secondo IDC, quasi un terzo dei gadget intelligenti portati a casa a livello globale sono smart TV e dispositivi di streaming.
Sono spesso solo lì, però. Può essere difficile ricordare quale telecomando li gestisce. Gli STB potrebbero diventare la piattaforma principale per nuove applicazioni e servizi utilizzando le prestazioni nascoste all’interno di questi dispositivi metallici senza pretese.
Contenuti non strutturati
Ad esempio, i miglioramenti nella generazione di contenuti e la disponibilità dell’IP come percorso di distribuzione chiave consentono progressi nei media basati su oggetti. I singoli consumatori possono ottenere una versione personalizzata di un programma utilizzando supporti basati su oggetti, che possono includere modifiche più comuni come sottotitoli o tracce audio, nonché narrazioni ramificate (come trame “scegli la tua avventura”) e diverse angolazioni della telecamera per sport o personalizzati pubblicità. Quindi, diversi elementi possono essere integrati sul dispositivo, nel cloud o combinando entrambi.
Probabilmente vedremo ulteriori applicazioni innovative di questa tecnologia nei prossimi anni man mano che gli standard multimediali basati su oggetti continuano a svilupparsi. Inoltre, con la programmazione basata su oggetti accessibile a casa o durante eventi sportivi dal vivo, sarà probabilmente un’esperienza pubblica/privata.
Supporto per fotocamere intelligenti
Lavorare in remoto durante l’epidemia di COVID-19 ha modificato il comportamento dei consumatori e normalizzato l’utilizzo di strumenti di videoconferenza a casa che fino ad allora erano appropriati esclusivamente per l’ufficio. Queste applicazioni si adattano perfettamente al soggiorno di una casa. Le immagini immersive utilizzate dalle fotocamere intelligenti forniscono filtri per la realtà aumentata (AR), il miglioramento o la sfocatura dello sfondo, la messa a fuoco intelligente con tracciamento del volto e il riconoscimento dei gesti delle mani e del corpo.
Mentre altri schermi, come quelli per laptop, tablet e smartphone, hanno già da un po’ di tempo le fotocamere integrate, gli utenti devono essere certi che i loro televisori dotati di fotocamera dispongano dei livelli necessari di sicurezza e tecnologia per la tutela della privacy. In quest’area, Arm sta lavorando in modo aggressivo per soddisfare le crescenti aspettative di sicurezza.
Programmi di fitness e giochi
Oltre alle tradizionali console di gioco, gli STB offrono anche una varietà di servizi di gioco, direttamente tramite lo stesso STB o tramite servizi di cloud gaming come Google Stadia e Tencent Games per il mercato cinese. Gli STB dovranno consentire video, streaming di comandi e funzionalità a bassa latenza per il cloud gaming. Sebbene le piattaforme di gioco native traggano vantaggio dal non aver bisogno di una connessione a banda larga rapida e affidabile, richiedono comunque dispositivi STB con unità di elaborazione centrale (CPU) e unità di elaborazione grafica (GPU) notevolmente migliorate per esperienze di gioco migliori. I giochi ad alte prestazioni sono ora più convenienti che mai grazie ai recenti sviluppi nella grafica mobile.
L’aumento delle persone che si esercitano a casa è un altro modello che abbiamo notato durante la pandemia di COVID-19. Queste app richiederanno algoritmi di tracciamento della posizione del corpo AI oltre a un sottosistema vocale sempre attivo per le funzionalità di comando vocale e assistente digitale per funzionare.
Interfaccia utente vocale sempre attiva
Il controllo vocale sempre attivo sarà una caratteristica cruciale per godere con facilità di queste nuove esperienze sui dispositivi STB. Per una migliore esperienza utente, l’interfaccia utente vocale, ora ampiamente disponibile sui STB odierni, consente applicazioni ed esperienze più complicate, come i programmi di fitness sopra menzionati (UX). Le maggiori capacità di machine learning (ML) nei dispositivi STB, in particolare su CPU e GPU, potrebbero essere cruciali per espandere la capacità di intelligenza artificiale per ridurre il consumo energetico in standby e offrire esperienze reattive.
Requisiti di sicurezza più elevati
Inoltre, nuove esperienze aumenteranno la probabilità di attacchi e furti. Il problema principale è garantire che tutto il contenuto sia protetto sull’intera piattaforma quando i motori aggiuntivi nel chipset elaborano il video. Ciò comporta la difesa da attacchi al contenuto, al sistema operativo, alle applicazioni e alle risorse. Inoltre, ora ci sono molti più dati utente salvati sui dispositivi grazie alle nuove applicazioni STB, inclusi dati privati e risorse per account di social network, pagamenti e video. Con i produttori di STB che prendono in considerazione misure di sicurezza più complesse su tutti i dispositivi, devono esserci norme di sicurezza più rigorose per proteggere i dati degli utenti. Questo è probabilmente paragonabile al modo in cui i dati degli utenti sono protetti sui dispositivi moderni.
DTV e STB sono opportunità in un mercato in evoluzione che si nascondono in bella vista. I moderni DTV hanno un’enorme area di visualizzazione e gli STB sono ampiamente utilizzati, offrendo agli sviluppatori di hardware e software una tela bianca su cui costruire la casa intelligente. Arm offre la proprietà intellettuale (IP) e le soluzioni necessarie per rendere possibili le capacità all’avanguardia e nuovi casi d’uso.