LakeQuest: Um benchmark de três domínios para resposta a perguntas fundamentada em data lakes
arXiv:2607.12310v1 Tipo de anúncio: novo Resumo: Embora os sistemas modernos de resposta a perguntas (QA) se destaquem em corpora limpos e alinhados a esquemas, o conhecimento do mundo real raramente vem tão bem organizado assim. Responder perguntas sobre data lakes corporativos e científicos exige que os sistemas naveguem por coleções heterogêneas e fracamente estruturadas de tabelas, trechos de texto e metadados vinculados. Os benchmarks atuais abstraem esse processo ruidoso de descoberta, deixando de avaliar o desempenho de ponta a ponta. Para preencher essa lacuna, nós apresenta...
arXiv cs.CL
·Michael Solodko, Steven Gong, Guangwei Yu, Satya Krishna Gorti, Jesse C. Cresswell, Victor Zhong
·
// relacionados
Leia também
Blog
Orquestração agêntica: as organizações de IA corporativa têm um problema de implantação, não um problema de plataforma — e a maioria está chamando chatbots de agentes
Blog
Soofi Consortium lança o Soofi S 30B-A3B: um modelo de fundação MoE híbrido Mamba-Transformer aberto para alemão e inglês
Modelo
thinkingmachines/Inkling
Blog