In un articolo congiunto con @OwainEvans_UK nell'ambito dell'Anthropic Fellows Program, studiamo un fenomeno sorprendente: l'apprendimento subliminale. I modelli linguistici possono trasmettere i loro tratti ad altri modelli, anche in quelli che sembrano essere dati privi di significato.
Owain Evans
Owain Evans23 lug 2025
Nuova carta e risultato sorprendente. Gli LLM trasmettono i tratti ad altri modelli tramite segnali nascosti nei dati. I set di dati costituiti solo da numeri a 3 cifre possono trasmettere un amore per i gufi o tendenze malvagie. 🧵
L'apprendimento subliminale può avvenire per tratti benigni (come l'apprezzare le aquile) o tratti più preoccupanti (come la disallineamento). Questo ha conseguenze per l'addestramento su dati generati da modelli. Leggi di più sul nostro blog di Scienza dell'Allineamento:
240,67K