Scaled Dot-Product Attention

Transformerの仕組みを体系的に理解したい　第３章新着!!

第3章: Attention機構の仕組み Transformerの革新の中心となるのがAttention機構です。特に、Self-Attention（自己注意メカニズム）は、入力文中の単語間の関係をモデル化するための鍵と […]