Avaliando a Confiabilidade Não Uniforme em Diferentes Condições de Resposta: Um Framework de Generalizabilidade Condicional Ilustrado na Pontuação Automatizada de Redações

arXiv:2607.11981v1 Tipo de Anúncio: novo Resumo: Estimativas agregadas de confiabilidade podem obscurecer a heterogeneidade na carga de medição do design ao longo das condições de resposta, de modo que um único estudo G ou D pode caracterizar incorretamente a adequação de um design para determinados estratos. Este estudo introduz um framework de generalizabilidade condicional com três componentes. Primeiro, as configurações de pontuação automatizada — as arquiteturas de encoder e as famílias de cabeças de pontuação admissíveis dentro de um pipeline fixo — são tratadas como um universo de ...