
챗gpt란? 배경, 향후 방향성 등
·
생성형 AI/ChatGPT
흔히 GPT, chatgpt, 챗지피티, 챗gpt 등 사용되는 GPT(Generative Pre-trained Transformer)에 대해 알아보겠습니다. 1. GPT 모델의 배경GPT 모델은 Google이 2017년에 발표한 'Attention Is All You Need' 논문에서 소개된 Transformer 아키텍처로 거슬러 올라갑니다. 아키텍처는 멀티헤드 주의 메커니즘을 통해 뛰어난 언어 모델링 능력을 선보였으며, OpenAI의 연구진은 이 아키텍처를 기반으로 GPT 시리즈의 첫 번째 모델을 개발하게 됩니다.GPT-1과 GPT-2는 각각의 출시 시점에서 주목받기 시작했으나, GPT-3의 등장은 전례 없는 관심을 불러일으켰습니다. GPT-3의 파라미터 수는 약 1750억 개에 달하며, 이는..