Kling 4.0 Omni Reference: movimento, personaggi e prompt

👁 122 letture

Kling 4.0 Omni Reference è una modalità che permette di fornire fino a 15 riferimenti per un singolo video: immagini di personaggi, video da cui copiare i movimenti, storyboard e campioni vocali. In pratica, riunisce due funzioni che in Kling 3.0 erano separate: Omni e Motion Control. Riassumo i limiti indicati nella nota ufficiale, mostro gli esempi del produttore e propongo alcuni modelli di prompt. Ne ho testato uno con Kling 3.0 Omni, perché Kling 4.0 non è ancora disponibile via API.

Che cos’è Omni Reference in Kling 4.0

Omni Reference è una modalità di generazione in cui il modello riceve non solo un prompt, ma anche materiali che mostrano come qualcosa dovrebbe apparire o muoversi. In Kling 4.0, tutto viene inserito in un unico campo nella schermata di creazione, insieme al testo e all’audio. Il produttore indica tre possibili usi: controllare personaggi e scene, ricreare video esistenti con nuovi prodotti o protagonisti e modificare con precisione un video già pronto.

La modalità è prevista nella versione completa di Kling 4.0 da ottobre 2026 ed è già disponibile in Kling 4.0 Flash, in accesso anticipato dal 28 settembre e, secondo il listino, solo nel piano Ultra. Per saperne di più sulle due versioni, leggi la guida a Kling 4.0.

Limiti dei riferimenti

Per fare un confronto, Kling 3.0 Omni nell’API di fal.ai accetta al massimo 4 immagini ed elementi in totale quando alleghi un video. Kling 4.0 aumenta questi limiti di diverse volte, anche se non so ancora come funzionerà via API.

Quali riferimenti puoi usare

• Immagini: una foto del personaggio, una vista da tre angolazioni, una griglia di fotogrammi, un’infografica, fotogrammi chiave o uno schizzo della composizione (wireframe). Servono a definire aspetto, composizione, stile e testo nell’inquadratura.
• Video: recitazione, movimenti del corpo, movimenti di camera e ritmo. La nota menziona anche video con modelli 3D grigi e mappe di profondità, che consentono un controllo molto preciso del movimento.
• Elementi: un personaggio o un oggetto descritto tramite più immagini o un video, a cui puoi assegnare una voce specifica.

Movimento da un video di riferimento e Kling Motion Control

Kling offre già uno strumento separato, Motion Control, che secondo la pagina dei piani «riproduce movimenti complessi ed espressioni facciali» a partire da una motion capture. Tra le funzioni di Kling di cui ho verificato la domanda, era quella che registrava l’interesse maggiore in Polonia: secondo Google Ads, la frase «kling motion control» aveva una media di 1000 ricerche mensili nei 12 mesi precedenti; ad agosto 2026 erano già scese a 140. In Kling 4.0 si ottiene un risultato simile combinando «immagine di riferimento + video con il movimento» in Omni Reference, all’interno di un unico task e dello stesso modello usato per il resto della scena. La nota non dice se Motion Control continuerà a essere disponibile come strumento separato.

Usare uno storyboard come riferimento

L’esempio della nota che trovo più pratico è lo storyboard: alcuni fotogrammi accompagnati dalla descrizione delle inquadrature, al posto di un prompt lungo. Il produttore ha fornito due immagini, un foglio con il personaggio e una tavola con le inquadrature disegnate.

Modelli di prompt

Ho preparato i modelli qui sotto seguendo le categorie della nota. I riferimenti @Image1 e @Element1 derivano dalla sintassi di Kling 3.0 Omni nell’API di fal.ai; nell’app di Kling 4.0 i riferimenti si inseriscono dalla schermata di creazione e la sintassi potrebbe essere diversa. I prompt sono in inglese, perché Kling esegue meglio anche le battute pronunciate in quella lingua (l’ho verificato nel test Kling in polacco).

• Personaggio in una nuova scena: «@Image1 is the main character, keep her face, hair and clothes exactly the same. She [action] in [location]. [Camera movement], [lighting]. She says in English: “[line]”. No subtitles, no music.»
• Movimento da un video: «@Element1 performs the exact movement from @Video1. Keep the camera angle and timing of @Video1, replace the background with [location].»
• Sostituzione di un prodotto: «Recreate @Video1 shot by shot, keep the pacing and camera moves, but replace the bottle with the product from @Image1. Keep the label text readable.»
• Storyboard: «Follow the storyboard in @Image2 panel by panel, one shot per panel, with @Element1 as the hero. Total length [N] seconds, cut on action.»
• Movimento della camera da un riferimento: «Use the camera movement from @Video1 (slow orbit, then push-in). Subject: [description]. Keep the subject centered.»

Il mio test: il modello «personaggio in una nuova scena» con Kling 3.0 Omni

Il 28 settembre 2026 ho provato il primo modello con Kling 3.0 Omni Standard su fal.ai, in modalità reference-to-video, perché era la versione più recente di Kling con riferimenti disponibile via API. Come riferimento ho usato un fotogramma di un mio precedente video di prova, per non rielaborare materiale di altri. Il prompt completo, in inglese: «@Image1 is the main character, keep her face, hair and sweater exactly the same. She stands up from the kitchen table, walks to the window and looks outside at the rain. Slow push-in camera, soft daylight, realistic. When she reaches the window she says in English: “It is finally raining.” No subtitles, no on-screen text, no music.»

L’aspetto del personaggio, i capelli e il maglione corrispondono al riferimento; inoltre, il modello ha completato tutta la sequenza: si è alzata, ha raggiunto la finestra, ha guardato la pioggia e ha pronunciato la battuta. Il limite è che la donna parla dando le spalle alla camera, quindi non posso valutare il movimento delle labbra. Se avessi voluto un primo piano del viso, avrei aggiunto «she turns to the camera before speaking». È una mia valutazione basata su un solo video. Kling 4.0 promette di supportare nello stesso ruolo fino a 10 immagini e video con i movimenti, funzioni che Kling 3.0 Omni non offre nella stessa misura; il risultato con la versione 4.0 potrebbe quindi essere diverso.

Domande frequenti

Quanti riferimenti accetta Kling 4.0?

Fino a 15 in un singolo task: fino a 10 immagini, fino a 5 video per un totale massimo di 30 secondi, fino a 7 elementi (di cui 3 creati da video) e un campione vocale.

Omni Reference è disponibile in Kling 4.0 Flash?

Sì. La tabella di Kling 4.0 Flash nella nota di rilascio include Omni Reference, insieme alla generazione da testo e da immagine.

Kling 4.0 sostituisce Motion Control?

La nota non lo specifica. Omni Reference consente di trasferire a un personaggio di un’immagine i movimenti di un video di riferimento; tuttavia, al 28 settembre 2026 Motion Control risultava ancora uno strumento separato nella pagina dei piani.

Posso usare come riferimento il video di qualcun altro?

Dal punto di vista tecnico sì, ma «ricreare» la pubblicità di qualcun altro sostituendo il prodotto potrebbe violare il diritto d’autore. È più prudente usare video propri o materiali con licenza.

// continua a leggerePrompt per Kling AI: 9 formule pronte e i miei testGuideRockstar Games: da DMA Design a GTA 6. Storia, studi e personeMagazinePIDS-Bench: quanto sono deboli i rilevatori di prompt injectionMagazine