ByteDance ha rilasciato Seedance 2.0 durante il fine settimana e il generatore video AI Seedance 2.0 sta già facendo girare la testa. L'azienda dietro TikTok ha rilasciato silenziosamente il suo ultimo strumento video AI senza grandi clamori, ma i risultati che inondano i social media parlano da soli. Le persone lo stanno già confrontando con Sora 2 di OpenAI e Veo 3.1 di Google.
Il generatore video AI Seedance 2.0 crea clip di 15 secondi da input di testo, immagini, audio o video. Ciò che lo distingue è la qualità. I primi utenti ne stanno elogiando la precisione fisica, la coerenza dei personaggi e l'audio correttamente sincronizzato. Lo strumento genera dialoghi, suoni ambientali ed effetti sonori che corrispondono effettivamente a ciò che accade sullo schermo.
Secondo ByteDance, Seedance 2.0 raggiunge una velocità di output utilizzabile del 90% al primo tentativo. Si tratta di un enorme salto rispetto ai precedenti strumenti video AI che in genere forniscono circa il 20% di risultati utilizzabili. La differenza sta nell’architettura. ByteDance ha creato Seedance 2.0 con un sistema a doppio ramo che genera video e audio simultaneamente invece di aggiungere audio dopo l'evento.
Ciò che lo rende diverso
Seedance 2.0 supporta la generazione di testo in video e di immagine in video con una risoluzione di 1080p. Può gestire fino a nove immagini, tre clip video e tre file audio come input di riferimento. Puoi caricare pose dei personaggi, sequenze di azioni e campioni audio, quindi lasciare che l'intelligenza artificiale crei una scena attorno ad essi.
Lo strumento comprende anche il linguaggio cinematografico. Descrivi i movimenti della telecamera e le transizioni delle inquadrature e Seedance 2.0 genererà una sequenza multi-scatto dall'aspetto semi-professionale. Una clip virale mostrava qualcuno che caricava foto statiche e recuperava un clone digitale fotorealistico, anche se ByteDance ha rapidamente vietato i caricamenti di volti dopo che è diventato virale.
Al momento, il generatore video AI Seedance 2.0 è disponibile tramite la piattaforma Dreamina di ByteDance e Doubao in Cina. È già integrato in CapCut, ma non si sa nulla sull'integrazione di TikTok data la situazione della proprietà dell'app negli Stati Uniti.
La reazione dei creativi è stata mista. Alcuni vedono enormi sconvolgimenti in arrivo nel cinema e nella pubblicità. Altri si preoccupano dei deepfake e del copyright, dal momento che i primi campioni mostrano già che le celebrità vengono utilizzate senza permesso. Ciò avviene pochi mesi dopo che OmniHuman-1 di ByteDance ha sollevato preoccupazioni simili sui video AI iperrealistici.