SimpleToM: Valutazione del gap tra teoria della Mente Esplicita e Applicata nei LLM
La punta analizza il dataset SimpleToM, sviluppato per valutare la capacità dei modelli linguistici di grandi dimensioni (LLM) di applicare la teoria della mente (ToM) in situazioni realistiche. Gli studi mostrano che, pur essendo bravi a prevedere stati mentali espliciti, gli LLM faticano ad applicare queste conoscenze implicitamente per prevedere i comportamenti o giudicarne la razionalità. Questo evidenzia la necessità di migliorare le capacità di memoria e di ragionamento adattivo degli LLM per garantire la loro efficacia nelle interazioni con gli esseri umani.