Attention is All You Need

Bu makale, geleneksel tekrarlayan veya evrişimli ağlar yerine, yalnızca dikkat mekanizmalarına dayanan yeni bir basit ağ mimarisi olan Transformer'ı sunmaktadır. Transformer, paralel hesaplamayı mümkün kılarak ve uzun mesafeli bağımlılıkları daha iyi modelleyerek makine çevirisi görevlerinde üstün performans göstermiştir.