Tecnologie

AutoFlip di Google è progettato per ritagliare i video in modo intelligente

AutoFlip di Google è progettato per ritagliare i video in modo intelligente

Tradizionalmente, le persone usavano televisori con proporzioni 16: 9 o 4: 3 per guardare i video. Tuttavia, con i dispositivi recenti, le persone visualizzano e creano video in una serie di proporzioni. Ritagliare i video per adattarli agli schermi di questi dispositivi è un compito noioso per i curatori di video. Per fortuna, Google sta cercando di ritagliare i video senza problemi.

Recentemente in un post sul blog, Google ha annunciato uno strumento open source per la riformulazione e il ritaglio dei video per adattarli a qualsiasi schermo. AutoFlip è lo strumento che utilizza la tecnologia di rilevamento e tracciamento degli oggetti basata sull'apprendimento automatico (ML) per riformulare automaticamente i video.

AutoFlip - Per il ritaglio video intelligente

Google ha creato questo strumento per sbarazzarsi del metodo convenzionale di ritaglio statico per ritagliare i video. Il metodo di ritaglio statico implica tecniche inaffidabili di reframing video, ovvero la specifica di una finestra di visualizzazione della telecamera per il video e quindi il ritaglio di tutto al di fuori di tale area. Questo metodo produce un output indesiderato dei video.

Il Google Autoflip è in grado di molte funzionalità avanzate che includono rilevamento delle riprese, analisi dei contenuti video e, infine, reframing. Consentitemi di rompere brevemente ciascuna di queste strategie di riformulazione.

Rilevamento di ripresa (scena)

Una scena o una ripresa in un video è una sequenza continua di fotogrammi senza tagli. Se c'è qualche cambiamento nella ripresa o nella scena di un video, AutoFlip di Google è in grado di rilevare la modifica confrontando l'istogramma dei colori dei frame precedenti con quelli nuovi. Un cambio di ripresa viene rilevato quando la distribuzione del colore del fotogramma cambia a una velocità diversa rispetto a una finestra storica scorrevole. Lo strumento, per ottimizzare il processo di ristrutturazione, bufferizza l'intero video prima di prendere qualsiasi decisione di ristrutturazione.

Analisi del contenuto video

Usando questa strategia, lo strumento rileva oggetti e persone importanti nel video. Utilizza modelli di rilevamento degli oggetti basati sul deep learning per identificare gli oggetti. Con questo modello, lo strumento può persino rilevare eventuali sovrapposizioni di testo o loghi di marchi e altri elementi come il movimento o la palla per i video sportivi. I modelli di rilevamento di volti e oggetti sono integrati nello strumento tramite MediaPipe. È fondamentalmente un framework per l'elaborazione di dati multimodali mediante lo sviluppo di pipeline. Questo framework utilizza il framework TensorFlow Lite ML di Google sulle CPU.

Reframing

Dopo aver identificato persone e oggetti nei video, lo strumento prende decisioni logiche su come riformulare il video. AutoFlip sceglie una delle tre strategie di riformulazione per ritagliare il contenuto - stazionario, panoramica o tracciamento. Lo strumento sceglie la strategia ottimale in base al contenuto del video. Ad esempio, in modalità stazionaria, la finestra della telecamera riformulata rimane fissa in una posizione fissa in cui sono presenti la maggior parte delle scene importanti del video. Per i video che contengono movimento, utilizza la panoramica spostando la finestra di visualizzazione della videocamera riformulata a velocità costante. Quando ci sono soggetti interessanti nell'inquadratura, la modalità Tracking entra in vigore.

In base alla strategia di reframing scelta dall'algoritmo, AutoFlip imposta una finestra di ritaglio ottimizzata per ogni fotogramma. Ciò preserva il contenuto importante del video nel miglior modo possibile.

Google ha rilasciato questo strumento direttamente agli sviluppatori e ai registi con l'obiettivo di "ridurre le barriere alla loro creatività progettuale e raggiungere attraverso l'automazione del video editing“. Dal paesaggio al ritratto o dal ritratto al paesaggio, qualunque sia il caso, AutoFlip è progettato per fornire il miglior risultato possibile.

Google Plus ha lanciato le pagine dei brand ma non ancora pubbliche
Google ha finalmente svelato la pagina del marchio per Google+, consentendo ad aziende e marchi di aderire al social network di Google. Secondo il po...
I 5 migliori strumenti gratuiti per l'analisi degli hashtag di Twitter
Twitter ha introdotto gli hashtag nell'agosto 2007 per raggruppare i tweet che contenevano informazioni che circondano una particolare parola chiave, ...
Curalate ti consente di sapere chi è il segnaposto del tuo marchio
Fino ad ora, credo che tutti debbano essere a conoscenza di Pinterest, ma lo stai sfruttando al meglio? Lo prendi sul serio quanto Facebook, Twitter o...