Comprensión del Razonamiento Silogístico en los LLM desde Perspectivas del Lenguaje Formal y Natural

Understanding Syllogistic Reasoning in LLMs from Formal and Natural Language Perspectives

December 14, 2025

Autores: Aheli Poddar, Saptarshi Sahoo, Sujata Ghosh

cs.AI

Resumen

Estudiamos el razonamiento silogístico en los LLMs desde las perspectivas lógica y lingüística. En el proceso, exploramos las capacidades fundamentales de razonamiento de los LLMs y la dirección en la que avanza esta investigación. Para respaldar nuestros estudios, utilizamos 14 modelos de lenguaje grande e investigamos sus capacidades de razonamiento silogístico en términos de inferencias simbólicas y comprensión del lenguaje natural. Aunque este mecanismo de razonamiento no es una propiedad emergente uniforme en todos los LLMs, los desempeños simbólicos perfectos en ciertos modelos nos hacen preguntarnos si los LLMs se están convirtiendo cada vez más en mecanismos de razonamiento formal, en lugar de explicitar los matices del razonamiento humano.

English

We study syllogistic reasoning in LLMs from the logical and natural language perspectives. In process, we explore fundamental reasoning capabilities of the LLMs and the direction this research is moving forward. To aid in our studies, we use 14 large language models and investigate their syllogistic reasoning capabilities in terms of symbolic inferences as well as natural language understanding. Even though this reasoning mechanism is not a uniform emergent property across LLMs, the perfect symbolic performances in certain models make us wonder whether LLMs are becoming more and more formal reasoning mechanisms, rather than making explicit the nuances of human reasoning.