ChatPaper.aiChatPaper

Open Deep Search: Democratisering van zoektechnologie met open-source redeneeragentschappen

Open Deep Search: Democratizing Search with Open-source Reasoning Agents

March 26, 2025
Auteurs: Salaheddin Alzubi, Creston Brooks, Purva Chiniya, Edoardo Contente, Chiara von Gerlach, Lucas Irwin, Yihan Jiang, Arda Kaz, Windsor Nguyen, Sewoong Oh, Himanshu Tyagi, Pramod Viswanath
cs.AI

Samenvatting

We introduceren Open Deep Search (ODS) om de groeiende kloof te dichten tussen de propriëtaire zoek-AI-oplossingen, zoals Perplexity's Sonar Reasoning Pro en OpenAI's GPT-4o Search Preview, en hun open-source tegenhangers. De belangrijkste innovatie in ODS is het versterken van de redeneervaardigheden van de nieuwste open-source LLM's met redeneeragenten die op een doordachte manier gebruik kunnen maken van webzoektools om vragen te beantwoorden. Concreet bestaat ODS uit twee componenten die samenwerken met een door de gebruiker gekozen basis-LLM: Open Search Tool en Open Reasoning Agent. De Open Reasoning Agent interpreteert de gegeven taak en voltooit deze door een reeks acties te coördineren, waaronder het aanroepen van tools, waarvan de Open Search Tool er één is. De Open Search Tool is een nieuwe webzoektool die beter presteert dan propriëtaire tegenhangers. Samen met krachtige open-source redeneer-LLM's, zoals DeepSeek-R1, benadert ODS en overtreft het soms de bestaande state-of-the-art-baselines op twee benchmarks: SimpleQA en FRAMES. Op de FRAMES-evaluatiebenchmark verbetert ODS bijvoorbeeld de beste bestaande baseline van de recent uitgebrachte GPT-4o Search Preview met 9,7% in nauwkeurigheid. ODS is een algemeen raamwerk voor het naadloos versterken van elke LLM – bijvoorbeeld DeepSeek-R1, dat 82,4% behaalt op SimpleQA en 30,1% op FRAMES – met zoek- en redeneervaardigheden om state-of-the-art prestaties te bereiken: 88,3% op SimpleQA en 75,3% op FRAMES.
English
We introduce Open Deep Search (ODS) to close the increasing gap between the proprietary search AI solutions, such as Perplexity's Sonar Reasoning Pro and OpenAI's GPT-4o Search Preview, and their open-source counterparts. The main innovation introduced in ODS is to augment the reasoning capabilities of the latest open-source LLMs with reasoning agents that can judiciously use web search tools to answer queries. Concretely, ODS consists of two components that work with a base LLM chosen by the user: Open Search Tool and Open Reasoning Agent. Open Reasoning Agent interprets the given task and completes it by orchestrating a sequence of actions that includes calling tools, one of which is the Open Search Tool. Open Search Tool is a novel web search tool that outperforms proprietary counterparts. Together with powerful open-source reasoning LLMs, such as DeepSeek-R1, ODS nearly matches and sometimes surpasses the existing state-of-the-art baselines on two benchmarks: SimpleQA and FRAMES. For example, on the FRAMES evaluation benchmark, ODS improves the best existing baseline of the recently released GPT-4o Search Preview by 9.7% in accuracy. ODS is a general framework for seamlessly augmenting any LLMs -- for example, DeepSeek-R1 that achieves 82.4% on SimpleQA and 30.1% on FRAMES -- with search and reasoning capabilities to achieve state-of-the-art performance: 88.3% on SimpleQA and 75.3% on FRAMES.

Summary

AI-Generated Summary

PDF463March 27, 2025