Crea video ultra-realistici con l’AI. Tutorial Flux + Runway

Grazie all’intelligenza artificiale, oggi è possibile generare video ultra-realistici in modo rapido ed economico. In questo articolo, esploreremo come utilizzare Flux.1 e Runway, due potenti strumenti di IA, per creare video sorprendenti partendo da semplici prompt testuali.

Grazie a Flux.1 creeremo delle immagini realistiche e poi trasformeremo quelle immagini in video con il modello di IA Gen-3 Alpha-Turbo di Runway.

Capitoli del video:

• 00:00 – Creare video AI ultra-realistici (Flux.1 + Runway)
• 00:28 – Flux + Fal.ai: genera immagini stupende
• 02:09 – Runway Gen-3: da immagini a video incredibili
• 03:39 – ChatGPT rivoluziona i tuoi prompt video
• 07:54 – Crea colonne sonore e voci con l’AI
• 08:19 – Video AI: l’appello di IA per tutti

Cos’è Flux.1 AI e come funziona

Flux.1 è un generatore di immagini AI open source (il codice viene messo disposizione di tutti) sviluppato dall’azienda Black Forest Labs. Una società fondata da alcune figure chiave nello sviluppo di Stable Diffusion, un altro modello open source per la generazione di immagini molto utilizzato.

Flux.1 è completamente gratuito nella versione Schnell e Dev e non è sottoposto a censure legate, per esempio, alla generazione di personaggi famosi o di soggetti coperti da copyright.

Mi raccomando, però, utilizza questa tecnologia in modo etico. E ricorda che non sei al riparo da conseguenze legali.

I modelli esistenti

FLUX.1 [schnell]: modello open source, che puoi scaricare in locale sul tuo pc, e utilizzare anche per scopi commerciali grazie a una licenza Apache 2.0.

FLUX.1 Dev: il modello intermedio, con 12 miliardi di parametri, permette generazioni di immagini più accurate della versione Schnell. Non potrai, però usare queste immagini per scopi commerciali.

FLUX.1 Pro: è il modello più performante del generatore di immagini di Black Forest Labs. Disponibile solo con Api. Dovrai quindi pagare un costo per integrarlo nelle tue applicazioni e utilizzare del codice. Esistono, però, piattaforme e strumenti che hanno fatto questo lavoro per te e permettono di generare immagini in modo intuitivo, grazie a un’interfaccia grafica. Ne ho parlato in questo video-tutorial completo su Flux.

Come utilizzare Flux per creare immagini realistiche

1. Accedi a Fal.ai e clicca su “Get Started”
2. Seleziona “Flux Realism Lora”. LoRA (Low-rank adaptation) è una tecnica che permette all’IA di generare immagini con specifiche caratteristiche, per esempio uno stile fumettistico, senza dover riaddestrare il modello.
3. Inserisci il tuo prompt
4. Configura le impostazioni aggiuntive:
   • Formato immagine: 16:9 (landscape)
   • Guidance Scale (CFG): ossia quanto l’immagine dovrà essere fedele al prompt fornito.
5. Clicca su “Run” e attendi la generazione dell’immagine
6. Scarica l’immagine generata cliccando su “Download”.

(Se clicchi sul video in basso partirà dal momento in cui mostro come generare immagini con l’AI)

💡 Consiglio: Impostare la Guidance Scale su 2 produce immagini più realistiche, evitando per esempio texture della pelle troppo levigate.

Come creare video da immagini con Runway (Gen-3 Alpha Turbo)

Runway è una piattaforma AI che permette di trasformare immagini statiche in video dinamici.

Procedura per creare video con Runway:

1. Accedi a Runwayml.com e clicca su “Get Started”
2. Carica l’immagine generata con Flux
3. Seleziona il modello “Gen-3 Alpha Turbo”
4. Incolla il prompt utilizzato per generare l’immagine con Flux, riducendo i caratteri se necessario. Ti verranno dati dei crediti gratuiti dopo aver registrato un account sulla piattaforma.
5. Clicca su “Generate” e attendi la creazione del video

(Se clicchi sul video in basso partirà dal momento in cui mostro genero video da immagini con Runway)

Come migliorare i tuoi prompt per i video con ChatGPT

Per ottenere i migliori risultati, è fondamentale creare prompt efficaci. ChatGPT può aiutarti a generare e ottimizzare i tuoi prompt.

Come creare un’AI specializzata per i prompt:

1. Accedi a ChatGPT
2. Vai su “Personalizza ChatGPT”
3. Inserisci istruzioni specifiche per l’analisi e la creazione di prompt per immagini e video
4. Usa questa AI personalizzata per analizzare e migliorare i tuoi prompt

(Se clicchi sul video in basso partirà dal momento in cui mostro come ottimizzare i prompt di ChatGPT per la generazione di video)

Risorse gratis: prompt usati nel video per ChatGPT

Scarica i prompt per la generazione di video.

Consigli e limitazioni

Gestione degli errori comuni:

• Problema: Le mani e i piedi spesso appaiono distorti o innaturali
• Soluzione: Concentra il prompt su inquadrature che non evidenziano queste parti del corpo, o specifica dettagli precisi sulle mani/piedi quando necessario

Migliorare la qualità dei video:

• Esperimenta con diverse impostazioni di “Guidance Scale” in Flux
• Usa prompt dettagliati che descrivono l’ambientazione, l’illuminazione e l’atmosfera. Fatti aiutare da ChatGPT
• Itera più volte, raffinando il prompt basandoti sui risultati ottenuti

Personalizzazione dei video: aggiungere voci e colonne sonore

Aggiunta di voce con Elevenlabs

Per aggiungere una voce realistica ai tuoi video, puoi utilizzare Elevenlabs. Questo strumento di permette di creare voci da zero o di riprodurre la tua, anche in più lingue. Guarda il nostro tutorial su come usare Elevenlabs.

Creazione di colonne sonore con Suno

Per dare vita ai tuoi video con musica originale, Suno AI è un ottimo strumento. Ti permette di creare canzoni partendo da testo o da brevi brani audio. Scopri come usare Suno nel nostro tutorial.

Risorse gratuite utili

• Strumenti, prompt gratis e news ogni settimana (newsletter)
• Entra nel forum Telegram e incontra centinaia di appassionati di AI
• Scopri 8 AI gratuite straordinarie
• News e approfondimenti su WhatsApp

FAQ

Cos’è DALL-E 3 e come si differenzia da Flux?

DALL-E 3 è un modello di generazione di immagini sviluppato da OpenAI e integrato in ChatGPT. Mentre Flux è open-source, mentre DALL-E 3 è un servizio privato.

Posso usare i video generati con l’AI di Runway per scopi commerciali? 

Si, puoi usare i video generati con Runway per uso commerciale anche con il piano gratuito. Ma con il piano free avrai una filigrana applicata sulle immagini. Qui trovi i termini di servizio di Runway dedicati proprio all’uso commerciale dei contenuti generati con l’AI.

Quanto costa mediamente creare un video con questi strumenti? 

Runway offre crediti gratuiti per iniziare e sperimentare generazioni di video con il modello Gen-3 Alpha Turbo. Su Fal.ai paghi in base all’utilizzo effettivo degli strumenti di generazione immagini. L’immagine generata con Flux nel video tutorial è costata 3 centesimi.