Het Begrijpen van Syllogistisch Redeneren in LLM's vanuit Formeel en Natuurlijk Taalperspectief

Understanding Syllogistic Reasoning in LLMs from Formal and Natural Language Perspectives

December 14, 2025

Auteurs: Aheli Poddar, Saptarshi Sahoo, Sujata Ghosh

cs.AI

Samenvatting

Wij bestuderen syllogistisch redeneren in LLM's vanuit zowel logisch als taalkundig perspectief. Hierbij onderzoeken we de fundamentele redeneervaardigheden van de LLM's en de richting waarin dit onderzoek zich beweegt. Ter ondersteuning van onze studie gebruiken we 14 grote taalmodel(len) en analyseren we hun syllogistische redeneervermogen op het gebied van symbolische inferenties en natuurlijke taalverwerking. Hoewel dit redeneermechanisme geen uniforme opkomende eigenschap is bij alle LLM's, zetten de perfecte symbolische prestaties van bepaalde modellen ons aan het denken over de vraag of LLM's steeds meer formele redeneermechanismen worden, in plaats van dat ze de nuances van menselijk redeneren expliciet maken.

English

We study syllogistic reasoning in LLMs from the logical and natural language perspectives. In process, we explore fundamental reasoning capabilities of the LLMs and the direction this research is moving forward. To aid in our studies, we use 14 large language models and investigate their syllogistic reasoning capabilities in terms of symbolic inferences as well as natural language understanding. Even though this reasoning mechanism is not a uniform emergent property across LLMs, the perfect symbolic performances in certain models make us wonder whether LLMs are becoming more and more formal reasoning mechanisms, rather than making explicit the nuances of human reasoning.