24/07/2026

Test A/B su creatività generate da AI: risultati e limiti

Occorre fare subito una premessa: si tratta di un caso composito, costruito su un pattern osservato ripetutamente in test di questo tipo condotti da diversi inserzionisti, non su un singolo cliente reale identificabile.

Il setup del test

Un brand di e-commerce nel settore beauty ha confrontato, su un periodo di otto settimane, due set di creatività per gli stessi prodotti: uno prodotto con fotografia tradizionale e post-produzione umana, l’altro generato con strumenti di AI generativa per sfondi e ambientazione, mantenendo il prodotto reale fotografato in studio e integrato digitalmente nella scena generata. Il test è stato strutturato come A/B classico su paid social, con budget e targeting identici tra i due gruppi, per isolare l’effetto della sola variabile creativa.

Cosa è emerso sul CTR

Il CTR delle creatività generate con AI è risultato superiore del 6% rispetto al set tradizionale nelle prime due settimane di test — un risultato che, isolato, avrebbe suggerito una vittoria netta per l’AI. Il vantaggio si è però ridotto progressivamente nelle settimane successive, fino ad azzerarsi quasi del tutto entro la sesta settimana. La spiegazione più plausibile, coerente con la letteratura sulla fatica creativa, è che la novità stilistica delle immagini generate — sfondi più saturi e onirici rispetto alla fotografia tradizionale del brand — abbia inizialmente attirato più attenzione per effetto di contrasto con il resto del feed, un vantaggio che si esaurisce quando il pubblico si abitua al nuovo stile.

Cosa è emerso sul conversion rate

Qui il quadro è meno favorevole all’AI. Il conversion rate del set generato è risultato inferiore del 4% rispetto al set tradizionale lungo tutto il periodo di test, senza un pattern di convergenza nel tempo paragonabile a quello osservato sul CTR. L’ipotesi più supportata dai dati qualitativi raccolti in parallelo (interviste brevi post-clic su un sottocampione di utenti) è che l’ambientazione generata, percepita come meno autentica rispetto alla fotografia tradizionale del prodotto, introducesse un piccolo attrito di fiducia proprio nel momento decisivo dell’acquisto — un effetto che il CTR, misurato prima ancora che l’utente valuti il prodotto da vicino, non intercetta.

Il limite più importante del test

Il test descritto isola l’effetto dello sfondo generato, non della generazione creativa in generale: prodotto, packaging e messaggio restavano identici tra i due gruppi. Un risultato di questo tipo non si generalizza automaticamente a casi in cui l’AI genera anche il soggetto principale, il copy o l’intera composizione — scenari che richiederebbero un test separato, perché la variabile cambiata sarebbe diversa e più ampia.

Un secondo limite riguarda l’orizzonte temporale: otto settimane sono sufficienti a osservare l’esaurimento dell’effetto novità sul CTR, ma non a escludere che il conversion rate più basso del set generato si stabilizzi diversamente su un periodo più lungo, quando anche l’ambientazione generata smette di essere percepita come insolita.

Cosa cambia per chi pianifica

Il pattern osservato in questo caso — e in altri con struttura simile — suggerisce una lettura più stratificata rispetto al giudizio netto “funziona” o “non funziona” spesso presente nella conversazione pubblica sul tema. Il vantaggio sul CTR, se esiste, è probabilmente temporaneo e legato all’effetto novità, non una proprietà stabile della creatività generata. L’effetto sul conversion rate merita più attenzione di quanta ne riceva di solito, perché è la metrica che il solo confronto sui costi di produzione — dove l’AI ha un vantaggio quasi sempre reale — tende a far passare in secondo piano.

Il criterio pratico resta lo stesso richiamato nel pezzo sulla generazione creativa: il costo di un errore che passa inosservato conta più della velocità di produzione, e in questo caso l’errore possibile non era estetico ma di fiducia nel momento dell’acquisto — un tipo di rischio che si vede solo tracciando il conversion rate separatamente dal CTR, non guardando solo quest’ultimo come proxy di successo.