Attention Is All You Need

이 논문은 트랜스포머(Transformer)라는 새로운 네트워크 아키텍처를 제안합니다. 트랜스포머는 기존의 시퀀스 모델링에서 필수적이었던 순환(Recurrence)이나 합성곱(Convolution)에 전혀 의존하지 않고, 오직 어텐션 메커니즘(Attention mechanisms)만을 사용하여 구축된 최초의 변환 모델입니다