OpenAI GPT-2 | NLP 자연어 'Language Models are Unsupervised Multitask Learners' 논문리뷰

이것은 인간인가 인공지능인가? 인간같은 작문 능력을 보여주는 GTP2
OpenAI에서 만든 GPT-2 로 유명한 'Language Models are Unsupervised Multitask Learners' 논문 리뷰입니다.
논문링크: d4mucfpksywv.c...
BERT와 쌍벽을 이루는 자연어 모델로, 대용량 사전학습을 통해서 만들어졌습니다. transformer의 Decoder만을 이용한 모델입니다. BERT와 어떻게 다르게 접근하여 만들어졌는지 차이점도 설명을 해보았으니 한번 보시죠!
모두에게 도움이 되었으면 좋겠고 궁금하신 점이나 응원은 댓글로 달아주시면 감사하겠습니다~
'PIEW9' 은 비전공자 전공자 상관없이 모두 모여서 인공지능 AI 논문을 읽고 리뷰하는 모임입니다.
open.kakao.com...