Memory Attention propõe alternativa às projeções de valores

Publicado em 24 de setembro de 2026, o artigo examina Memory Attention (MA) em várias variantes de attention. A proposta substitui a projeção de valores aprendida do Transformer pela soma de keys contextuais e vetores de memória indexados por token e específicos de cada camada.

O resumo descreve uma forma alternativa de representar e recuperar informações em camadas de attention, mas não informa resultados comparativos ou métricas. Para conferir o alcance das conclusões, consulte o artigo original e verifique quais variantes foram avaliadas e quais evidências sustentam cada afirmação.