Progetto OMBRA: Ragionamento Deduttivo Associativo di Ordine Superiore Simbolico su Wikidata utilizzando la sonda LM
Project SHADOW: Symbolic Higher-order Associative Deductive reasoning On Wikidata using LM probing
August 27, 2024
Autori: Hanna Abi Akl
cs.AI
Abstract
Introduciamo SHADOW, un modello linguistico raffinato addestrato su un compito intermedio utilizzando il ragionamento deduttivo associativo, e misuriamo le sue prestazioni su un compito di costruzione di una base di conoscenza utilizzando il completamento di triple di Wikidata. Valutiamo SHADOW sulla sfida LM-KBC 2024 e mostriamo che supera la soluzione di base del 20% con un punteggio F1 del 68,72%.
English
We introduce SHADOW, a fine-tuned language model trained on an intermediate
task using associative deductive reasoning, and measure its performance on a
knowledge base construction task using Wikidata triple completion. We evaluate
SHADOW on the LM-KBC 2024 challenge and show that it outperforms the baseline
solution by 20% with a F1 score of 68.72%.