Quantização Simétrica com Sinal para Inteiros de Poucos Bits
arXiv:2607.08779v1 Tipo de anúncio: novo Resumo: O alfabeto de inteiros com sinal contém um valor negativo representável a mais do que positivos. No entanto, por convenção, o quantizador de inteiros simétrico padrão fixa sua escala como estritamente positiva, o que atribui esse valor representável extra à cauda negativa e pode forçar o recorte de outliers positivos. Neste trabalho, mostramos que, em precisão de poucos bits, tal recorte é uma fonte não trivial de erro de quantização. A quantização assimétrica aborda isso...
arXiv cs.LG
·Ian Colbert, Eashan Dash, Pablo Monteagudo-Lago, Juan Amboage, Srinidhi N, Giuseppe Franco, Nicholas J. Fraser, Arun Ramachandran
·
// relacionados
Leia também
Blog
As alegações mais escandalosas no processo da Apple contra a OpenAI por segredos comerciais
Blog
O que a mais recente descoberta em IA da Anthropic mostra — e o que não mostra
Blog
Novo guia de prompts da OpenAI diz aos usuários para parar de complicar e começar pelo resultado
Blog