Estudo organiza alternativas de positional encoding
Artigo examina positional encodings para Transformers, aponta o viés do RoPE em favor de tokens próximos e organiza avaliações de alternativas feitas em configurações distintas.
Publicado em 29 de setembro de 2026, o estudo examina positional encodings para Transformers. O texto observa que o RoPE favorece tokens próximos e descreve a avaliação de alternativas em configurações distintas.
O trabalho busca organizar uma literatura que os autores consideram fragmentada; o resumo disponível não informa quais alternativas tiveram melhor desempenho. Engenheiros podem consultar o artigo para comparar abordagens e verificar no original os métodos, as configurações e os resultados reportados.