논문 정리1 Attention is All You Need 논문 정리 이번 포스팅은 Coference on Neural Information Processing Systems (NIPS 2017)에서 소개된 "Attention is All You Need" 논문을 정리하려고 한다. 논문의 제목으로도 볼 수 있듯이 해당 논문의 핵심은 Attetion이라는 것은 누구나 알 수 있다. 그렇다면 Attention이라는 개념이 어떤 문제를 해결하기 위해 나오게 되었는지, 어떤 아이디어를 통해 해당 문제를 해결했는지, 해당 아이디어를 통행 이룬 효과는 무엇인지에 대해서 말해보려고 한다. 해당 논문 전에 어떤 문제가 있었는가? 그 문제를 해결하기 위해 본 논문에서 제안한 아이디어는 무엇인가? 제안한 아이디어를 통해 이룬 효과는 무엇인가? 어떤 문제를 해결하기 위해 나오게 되었는가? R.. 2021. 7. 12. 이전 1 다음
