Creare un videogioco con l'IA: un soulslike in 3 giorni con Claude e il Dream Loop
Come creare un videogioco con l'IA: Meng To ha fatto un soulslike in Three.js in 3 giorni con Claude. I sei passi, il Dream Loop e il mio test.

Con l'IA, creare un videogioco che "funziona" ormai non è più difficile; la parte difficile è renderlo "bello". Chiedi all'IA di migliorare un po' l'illuminazione o di rendere gli effetti più spettacolari, lei ti dice ogni volta che è fatto, ma tu non riesci a capire se è davvero migliorato, né sapresti dire cosa manca.
Meng To, fondatore di Design+Code e di Aura, ha condiviso di recente su X un gioco in stile soulslike fatto in Three.js: completato in tre giorni con Claude Fable 5.2, gira nel browser, ha illuminazione, effetti e audio completi, e non ha nemmeno un passaggio di build. Spiega tutto il workflow in un thread (il thread originale) e ha pubblicato su GitHub, open source, le skill che ha usato, ma i prompt completi non sono pubblici. In questo articolo smonto i suoi sei passi, concentrandomi sul trucco che fa migliorare la grafica di continuo, il Dream Loop, e alla fine l'ho provato anch'io sulla base lunare della home del mio sito.

Quali strumenti IA ha usato per creare il gioco?
La combinazione che elenca è di soli quattro elementi:
- Claude Code: Fable 5.2 come modello principale, con Opus 5.5 per i sottocompiti.
- Three.js: 3D puro per il web, senza bundling né build, gira direttamente nel browser.
- Seedream 5.0 Pro: generazione di immagini con l'IA, per i concept dei personaggi, le icone dell'interfaccia e soprattutto l'"immagine obiettivo".
- Tripo 3D: trasforma i concept in modelli 3D.
Gli strumenti in sé non hanno niente di speciale; quello che vale la pena imparare è come li ha collegati in un ciclo che migliora da solo.
Passo 1: prima rendi il gioco giocabile
Il primo passo ha un solo obiettivo: avere una versione giocabile. Ha dato a Fable 5.2 un prompt e gli ha fatto caricare tre skill: dream-loop, open source di un altro sviluppatore, più due scritte da lui, una per il workflow di "valutazione rispetto a un obiettivo" e una per il design del combattimento action (sono entrambe nella sua libreria di Skills).
Dopo sei ore e dodici prompt c'era già un livello in cui si poteva camminare e combattere, con un boss. A questo punto non importa ancora se la grafica è bella: prima si fa funzionare il gameplay.
Passo 2: dividi il lavoro tra più agenti IA
Una volta giocabile, ha messo Fable 5.2 a fare da direttore, aprendo diversi thread secondari con Opus 5.5, ognuno responsabile di un ambito: illuminazione, effetti, personaggi, oggetti, interfaccia, audio. Fino a nove in parallelo, e ognuno modifica solo i file di sua competenza.
Quest'ultima regola è fondamentale. Quando più IA modificano lo stesso progetto contemporaneamente, il problema più comune è che si sovrascrivono a vicenda; se ognuno si occupa dei propri file, i nove thread possono davvero lavorare in parallelo.
L'audio è l'eccezione. Nei commenti ha spiegato che oggi l'IA è ancora scarsa a sintetizzare effetti sonori via codice, quindi ha usato la sua libreria di suoni, collegata con la skill earshot.
Passo 3: come trasformare le immagini IA in modelli 3D
Il processo per personaggi e mostri è questo:
- Seedream disegna il concept, con condizioni molto rigide: posa standard ad A, sfondo grigio.
- Tripo 3D converte il concept in un modello GLB; nel gioco ne sono stati usati 29 in tutto.
- I modelli convertiti non hanno scheletro: scheletro e animazioni li ha scritti l'IA direttamente in codice.
La posa ad A e lo sfondo grigio servono a rendere più semplice la conversione da immagine a 3D: con le braccia staccate dal corpo non si fondono in un blocco unico, e con uno sfondo pulito le ombre non finiscono "cotte" nella texture. Ho incontrato lo stesso problema in "Modellazione 3D con l'IA: la mia prova" e in "Come controllare un modello Tripo AI": se il concept non è preparato bene, dopo è una fatica sistemare qualsiasi cosa.
Dice che tutti i prompt e gli asset stanno su un unico canvas di Fil, dove si vede a colpo d'occhio quale concept è diventato quale modello. Nel thread però ha pubblicato solo uno screenshot del canvas; il canvas in sé non è pubblico, quindi i prompt completi non si possono leggere.
Passo 4: cos'è il Dream Loop?
È la parte più furba di tutto il processo.
- Fai uno screenshot del gioco.
- Chiedi a Seedream di ridisegnare quello screenshot, con un prompt che pretende che inquadratura, composizione, disposizione e pose dei personaggi restino identiche, e che il risultato sia solo più bello.
- Questa versione ridisegnata è l'"immagine obiettivo": gli agenti IA lavorano su illuminazione, materiali ed effetti finché la scena del gioco non le si avvicina.
Perché funziona? Perché "rendi la grafica un po' più bella" è una richiesta impossibile da verificare, mentre un'immagine obiettivo con la stessa inquadratura si può confrontare direttamente: se le ombre negli angoli sono abbastanza profonde, se la luce entra dalla finestra, se il pavimento riflette, si vede tutto. E finalmente anche l'IA ha una direzione concreta da inseguire.
Per pietre, anfore e materiali lapidei della scena ha usato le scansioni gratuite CC0 di Poly Haven: non tutto deve essere generato dall'IA.
Il mio test: un Dream Loop sulla base lunare
Ho provato con lo studio lunare della home del mio sito. È una scena fatta in Three.js, con il protagonista Terry in piedi al centro dello studio e la superficie lunare fuori dalla finestra.

Ho ridisegnato lo screenshot con il generatore di immagini di ChatGPT (gpt-image), con un prompt impostato come quello di Meng To, diviso in due parti:
- Non cambiare niente: posizione della telecamera, angolo di visuale, composizione, posizione e numero di ogni oggetto, posa del personaggio e il suo stile chibi, struttura della stanza, palette. Ho specificato in modo esplicito di non trasformarlo in uno stile realistico.
- Cambia solo il rendering: occlusione ambientale negli angoli e sotto i mobili, luce calda all'interno e luce lunare fredda che entra di sbieco dalla finestra, schermi leggermente luminosi, piastrelle un po' lucide, crateri della superficie lunare più nitidi e stelle nel cielo, più un po' di bloom e vignettatura.

Già al primo tentativo si vede la direzione: negli angoli ci sono le ombre, la luce della finestra disegna strisce sul pavimento, la superficie lunare da una distesa grigia diventa un terreno con crateri e rocce. Sono tutte cose che posso dire direttamente all'IA: "cambialo così".
Ma si vedono anche i problemi: l'inquadratura si è allargata un po' e la scrivania è diventata più piccola. Avevo scritto chiaramente di non toccare la telecamera, eppure il modello di generazione cambia la composizione di nascosto. Per usarla come immagine obiettivo devo prima verificare che non abbia modificato cose che non doveva; ed è proprio per questo che il passo successivo, la valutazione, è così importante.
Che differenza c'è tra Seedream e gpt-image?
Meng To usa Seedream per le immagini obiettivo, io la prima volta ho usato gpt-image. Per confrontarli bene ho fatto un nuovo screenshot e ho dato lo stesso screenshot e lo stesso prompt sia a Seedream 5.5 sia a gpt-image. Meng To ha usato Seedream 5.0 Pro; io ho usato la più recente 5.5, che nei miei test è risultata più economica e già abbastanza precisa da allinearsi al pixel. Non mi interessava tanto chi disegna meglio, quanto chi rispetta di più la composizione, perché è proprio quello di cui il Dream Loop ha più bisogno.
Questa volta il prompt era molto più severo del primo: la composizione doveva essere allineata al pixel, nessun oggetto e nessun bordo poteva spostarsi, e si potevano aggiungere solo effetti ottenibili con il rendering in tempo reale di Three.js, come luci, ombre, materiali e bloom, senza disegnare cose che un motore di gioco non può fare.

Entrambe sono molto più belle dell'originale, ma hanno caratteri diversi:
- Seedream 5.5 tende al freddo e al realistico: superficie lunare luminosa e nitida, pavimento riflettente, nel complesso sembra una vera stazione spaziale.
- gpt-image tende al caldo e crea più atmosfera: le luci del soffitto sono più calde, il cielo stellato più fitto e la luce della finestra disegna strisce ben visibili sul pavimento.
La vera differenza si vede solo sovrapponendo il ridisegno all'originale:

- Seedream 5.5 è allineato quasi al pixel: sovrapposto non si vede quasi nessuna immagine doppia, infissi, tavolo e personaggio sono al loro posto.
- gpt-image ci va vicino ma sbanda un po': le posizioni sono grosso modo giuste, ma i bordi del soffitto e degli infissi sono leggermente sfasati. Lo stesso gpt-image, finito il disegno, ha riferito che "la composizione è simile, ma non allineata al pixel".
Nemmeno Seedream ci è riuscito al primo colpo. La prima volta ha prodotto un'immagine quadrata, estendendo la scena in alto e in basso e ricomponendo tutto; ho ritagliato l'immagine di input in 16:9, ho specificato il formato di output e al secondo tentativo era allineata. Quindi, qualunque strumento usi, il formato di input e di output va stabilito prima.
La mia conclusione: come immagine obiettivo per il Dream Loop, Seedream è più adatto, perché gli agenti IA inseguono i dettagli punto per punto, e se la composizione è spostata anche di poco il lavoro va sprecato. gpt-image va bene per cercare una direzione, per vedere "che atmosfera potrebbe avere". In ogni caso, l'immagine obiettivo va sempre sovrapposta allo screenshot originale per un controllo, e se non combacia si ridisegna.
Passo 5: anche l'interfaccia la disegna l'IA
Per l'interfaccia del gioco non ha scritto quasi nessun prompt, più o meno così:
- Prima le ha chiesto un concept dell'intera interfaccia, comprese le barre di vita e stamina in basso.
- Le ha detto di realizzarla seguendo il concept.
- Visto che non era abbastanza raffinata, ha chiesto bordi con più gradienti, irregolarità, ombre e un effetto grana.
- Infine ha chiesto le icone in PNG trasparente.
Anche le icone sono PNG trasparenti disegnati da Seedream.
Passo 6: test alla cieca a ogni modifica
È la chiave che impedisce al Dream Loop di andare fuori controllo. Le sue regole sono:
- A ogni modifica, scatta un'immagine 4K prima e una dopo, dalla stessa inquadratura.
- Le passi a un giudice IA nuovo di zecca, con le due immagini in ordine casuale ed etichettate solo X e Y: il giudice non sa quale sia la nuova.
- La modifica resta solo se la nuova versione vince o pareggia.
- Un giro completo usa due giudici e una griglia di valutazione da 10 punti, tenendo il punteggio più basso, con l'obiettivo di arrivare a 9.
Gli agenti IA sono bravissimi a dire "ho finito", ma se modificano e verificano da soli, di solito il risultato va sempre più storto. Un giudice che non ha visto il processo, con l'ordine mescolato, equivale a un test di regressione sulla qualità visiva: le modifiche peggiorative non sopravvivono.
Anche i suoi comandi erano brevissimi, più o meno "continua a modificare finché non arrivi a 8" e "dammi sempre gli screenshot prima e dopo, e per le animazioni un video". Una volta l'effetto del fendente del boss non veniva mai bene e le sue risposte erano ormai visibilmente spazientite: a quanto pare anche il processo migliore ogni tanto si inceppa.
Quali sono i limiti nel creare giochi con l'IA?
Meng To stesso lo dice chiaramente: non è ancora un gioco finito.
- Nel video gioca un bot controllato da script, e ogni scena è preparata in anticipo.
- I giudici severi danno per lo più 5 o 6 punti, ancora lontani dal 9.
- Il caricamento richiede più di 10 secondi.
- Le animazioni di camminata e corsa sono le più difficili: nei commenti dice di aver fatto almeno 8 tentativi, e la camminata l'ha scartata 4 volte.
Quindi in tre giorni è venuta fuori una demo giocabile, non un gioco pronto per uscire. Ma per chi sviluppa giochi da solo, arrivare a questo livello partendo da zero in tre giorni è già impressionante.
Sviluppi giochi da solo? Ecco cosa imparare per primo
Se anche tu stai creando giochi con l'IA, secondo me le tre cose da portarsi a casa subito sono queste:
- Definisci il "bello" con un'immagine: screenshot, ridisegno, obiettivo. È molto più preciso che scrivere un lungo paragrafo sullo stile.
- Fai verificare a qualcun altro: screenshot prima e dopo dalla stessa inquadratura, dati a una nuova IA che sceglie alla cieca. Non far dare il voto a chi ha fatto la modifica.
- Un direttore che guida più agenti specializzati: ogni agente tocca solo i propri file, così puoi farli lavorare in parallelo senza pensieri.
Il mio prossimo passo è sistemare l'illuminazione dello studio lunare seguendo l'immagine obiettivo del test, scattando ogni volta una coppia prima/dopo da far scegliere ai giudici, per vedere se riesco davvero ad avvicinarmi a quell'immagine.
Anche tu hai provato a far giudicare all'IA se la grafica è migliorata? Scrivimi pure nei commenti di un mio post su Threads o su X e ne parliamo.


