llm

La chirurgia della conoscenza: come aggiornare, cancellare e valutare i LLM senza rieducarli da zero

Nuove ricerche mostrano come le architetture a memoria condizionale permettano aggiornamenti chirurgici dei fatti; il disapprendimento richiede paradossalmente più memoria; l'economia delle preferenze dichiarate offre un framework per valutare modelli senza risposte corrette note.

Pubblicato il

I grandi modelli linguistici sono spesso trattati come monoliti statici: si addestrano una volta, si comprimono, si quantizzano e si deployano. Ma la realtà operativa delle imprese italiane — banche che devono aggiornare normative antiriciclaggio, catene logistiche che cambiano codici doganali, studi legali che incorporano nuove sentenze — richiede che la conoscenza interna sia modificabile senza ricorrere a costosi cicli di rieducazione completa. Tre lavori pubblicati la scorsa settimana su arXiv affrontano il problema da angolazioni complementari: come scrivere nuovi fatti in modo selettivo, come rimuoverne di indesiderati senza danneggiare il resto, e come verificare che le risposte rimangano coerenti quando non esiste una "risposta giusta" oggettiva (EngramEdit: Decoupled Knowledge Updates in LLMs through Conditional Memory) (Why Forget-Only Unlearning Needs Memorization) (Validity Without Ground Truth: What Stated-Preference Economics Offers the Evaluation of Language Models).

Fonti