Memoria / Persistenza
Memoria persistente: può un’intelligenza artificiale ricordare nel tempo?
Che cosa resta dopo un riavvio? F188 e F274 mostrano come Elena AILL verifica il richiamo di informazioni consolidate, anche con parole diverse.
Che cosa succede alla memoria di un’intelligenza artificiale quando viene riavviata? Le informazioni che aveva conservato rimangono disponibili oppure vengono perse?
Elena AILL ha affrontato questa domanda con esperimenti dedicati alla memoria persistente.
Nella fase F188, il sistema è stato sottoposto a dieci controlli dopo il ricaricamento dello stato salvato: sei richiami con parole diverse, due collegamenti fra informazioni e due recuperi senza consultare il documento originale.
Tutti e dieci i controlli sono stati superati: 10/10, con esito PASS.
Un altro esperimento, F274, ha verificato il recupero semantico e i collegamenti fra fatti, ottenendo rispettivamente 10/10 e 2/2 nei propri controlli.
Questi risultati documentano il recupero di informazioni già consolidate nelle condizioni dei test. La ricerca prosegue sul modo in cui tali informazioni vengono selezionate e utilizzate nelle risposte.
Che cosa rimane quando la sessione finisce
Durante una conversazione, un sistema può utilizzare le informazioni presenti nei messaggi precedenti. Ma che cosa succede quando la sessione termina?
Per verificarlo, bisogna riavviare il sistema e controllare se riesce ancora a recuperare ciò che aveva conservato.
È proprio questo uno degli aspetti studiati negli esperimenti sulla memoria persistente di Elena AILL: verificare che le informazioni rimangano disponibili e possano essere recuperate anche dopo il riavvio.
F188: tornare ai fatti senza riaprire la fonte
Nell'esperimento F188, Elena AILL è stata sottoposta a una prova di recupero delle informazioni dopo il riavvio. Il sistema doveva ritrovare fatti memorizzati in precedenza, senza consultare nuovamente il documento originale.
L’esito è PASS: 6/6 richiami mediante parafrasi, 2/2 collegamenti fra fatti e 2/2 richiami senza il documento sorgente. Le tre famiglie compongono i 10/10 controlli. La prova riguarda contenuti già consolidati, non l’apprendimento di dieci documenti nuovi durante il test.
F188 · Che cosa viene ricordato dopo il riavvio
Sei controlli con parafrasi, due collegamenti fra fatti e due richiami senza il documento sorgente: 10/10 complessivi nella prova F188. Le barre mantengono i denominatori delle tre famiglie. Il PASS riguarda questo campione storico, non qualsiasi ricordo futuro.
Fonte: F188 · Document Memory Cold Reload ↗Ricordare anche se cambiano le parole
Ricordare un'informazione non significa necessariamente riconoscere sempre la stessa frase.
Per questo, nell'esperimento F188, alcune domande sono state formulate con parole diverse, mantenendo lo stesso significato.
Il sistema ha superato tutti e sei i controlli dedicati alle parafrasi.
La prova comprendeva anche due verifiche sui collegamenti fra informazioni differenti. Entrambe sono state superate.
Questi risultati riguardano i casi effettivamente esaminati nell'esperimento.
F274: un secondo riscontro
Un altro esperimento, F274, ha verificato il recupero delle informazioni dopo il ricaricamento dello stato salvato. Il sistema ha superato 10/10 controlli di richiamo semantico e 2/2 controlli sui collegamenti fra fatti. F274 è una prova distinta da F188, con risultati e condizioni propri. Entrambi gli esperimenti documentano il recupero di informazioni precedentemente consolidate.
Che cosa vale la pena conservare
Conservare un'informazione è importante, ma bisogna anche capire quando utilizzarla.
Una risposta corretta dipende infatti dalla capacità di recuperare i fatti pertinenti alla domanda. Un'informazione può essere memorizzata senza essere utile in ogni situazione.
F188 e F274 rispondono alle domande dei rispettivi test storici. Durata illimitata, assenza generale di oblio, isolamento fra utenti e cancellazione garantita richiedono verifiche dedicate, così come il comportamento del servizio attuale. Non sono proprietà misurate da questi due campioni.
Il ricordo è il punto di partenza
Gli esperimenti F188 e F274 mostrano che Elena AILL è riuscita a recuperare informazioni precedentemente memorizzate anche dopo il riavvio, nelle condizioni previste dai test.
La ricerca prosegue con un altro obiettivo: permettere al sistema di individuare le informazioni pertinenti e utilizzarle correttamente nelle risposte.
