Além dos Deslocamentos Temporais: Adaptando o Omni-LLM como um Avaliador Sem Referência para Modelos Generativos Audiovisuais

arXiv:2607.09091v1 Tipo de Anúncio: novo Resumo: À medida que os modelos generativos audiovisuais evoluem para simuladores de mundo, a sincronização entre modalidades se destaca como um indicador crítico para avaliar a consistência da dinâmica do mundo e da causalidade no conteúdo gerado. No entanto, as métricas de avaliação existentes pressupõem correção estrutural, reduzindo a sincronização a um mero alinhamento temporal. Consequentemente, elas falham em saídas generativas, especialmente quando exibem alucinações estruturais e assimetria entre modalidades ...

arXiv cs.CV ·Yijie Qian, Juncheng Wang, Chao Xu, Huihan Wang, Yuxiang Feng, Yang Liu, Baigui Sun, Yong Liu, Shujun Wang ·
compartilhar: