MedRealMM: Um benchmark multimodal do mundo real para consultas médicas online em chinês

arXiv:2607.09142v1 Tipo de anúncio: novo Resumo: Os grandes modelos de linguagem (LLMs) estão sendo cada vez mais utilizados em consultas médicas online, mas os benchmarks existentes continuam mal alinhados com a prática clínica real. Muitos deles se apoiam em conversas sintéticas ou simuladores de pacientes, omitem imagens médicas enviadas pelos próprios pacientes ou avaliam respostas clínicas abertas usando métricas de múltipla escolha ou de sobreposição léxica que refletem mal a qualidade clínica. Nós apresentamos o \textbf{MedRealMM}, um benchmark de larga escala para mu...

arXiv cs.CL ·Runhan Shi, Quan Zhou, Yuqian Xu, Shuai Yang, Xin Wu, Zitong Zhou, Hui Liu, Bin Cha, Zheming Wang, Liya Li, Wei Wei, Haoyuan Hu, Jun Xu ·
compartilhar: