[전략_노트]/[전략노트_지식]

[인공지능] 언어모델 챗봇: ChatGPT by OpenAI

스테판 in US 2023. 2. 15. 21:14

[인공지능] 언어모델 챗봇: ChatGPT by OpenAI

 

[인공지능] 언어모델 챗봇: ChatGPT by OpenAI에 대해 리뷰하려고 합니다.

 

최근 미디어에 자주 등장하는 인공지능 챗봇, ChatGPT이 연일 톱 뉴스가 되고 있네요.

 

2022년 11월 30일 샌프란시스코 소재한 OpenAI 에서 발표한 '인공지능 언어모델 챗봇'으로, 현재 해당 사이트에 접속해서 트라이얼 사용이 가능합니다.

 

ChatGPT: AI 대화형 언어모델 챗봇의 획기적 진화

ChatGPT 의 정식 이름은 'Chat Generative Pre-Trained Transforme'이고, OpenAI는 2015년 비영리 인공지능 연구소로 10억 달러 펀딩으로 설립되었고, 주요 창업자에는 샘 알트만, 일론 머스크. 일리야 수츠케버 등이 10명이 넘네요.

 

현재는 비영리이고, 참여하는 연구원들도 주로 구글 및 마이크로소프트 엔지니어들로 알려져 있고, 영리화하는 경우에도 이익 창출을 펀딩 기준 100배로 한정하는 것으로 원칙을 정했네요.

 

ChatGPT 사이트, OpenAI

 

 

ChatGPT, 혁신적 인공지능 언어모델 챗봇?

현재 영어 중심의 언어모델이므로, 텍스트 10,000개 이상의 데이터를 제공하면, 이를 기반으로 인공지능 학습을 하고, 대화형으로 답변을 하거나, 특정 태스크를 대상으로, 예로, MBA 시험, AWS 자격, SAP 언어영역 등, 과제를 패스하였고, 지능 태스크 결과로 IQ 149로 인간 1% 에 상위레벨로 평가되었네요.

 

현재 프로토타입을 개인용도로 사용하는 것을 무료이고, ChatGPT Plus는  $20/월로 제공됩니다.

 

언어모델 기반 인공지능 과제는 아래 차트와 같이 메이저가 많지만, GPT-3 은 발표 2개월만에 메이저 레벨이 되고 있네요.

 

결론적으로, 새로운 신경망 아케텍처 설계로 자연어 해석에 장점을 갖는 언어모델을 개발한 것은 맞는 것 같고, 인공지능 언어모델 챗봇으로 실제 텍스트 기반 채팅에 적용하는 사업모델이 가능하므로, 사업성도 좋아 보이는 상황입니다.

 

인공지능 언어모델 차트

 

 

ChatGPT = 기계학습한 데이터 + 자연어 분석 알고리즘 

ChatGPT 특징은 Self-attention 레이어 가 추가된 것과 사전 대규모 기계학습으로 언어모델에 적합하게 설계했다는 것 입니다.    

 

인공지능 및 신경망 설계의 아주 전문적인 영역이이서, 내용을 파악하려면 추가학습이 필요하네요.

 

일단, ChatGPT를 수차례 사용해본 경험으로는, 구체적인 질문에 보다 구체적인 답변이 나오는 패턴이었네요.

그냥 오픈 퀘스천을 던지면, 거기에 해당하는 개략적인 답변이 나오고, 아주 구체적인 숫자나 연도, 모델 등을 거론하면, 거기에 해당하는 구체적인 대답이 나오는 패턴인 듯합니다.

 

 

Chat GPT 로직
Chat GPT 로직

 

 

ChatGPT 아키텍처를 기반으로 별도 하드웨어가 설계되었고, 인공지능 엔지니어가 대거 투입된 과제입니다.

 

하드웨어:  슈퍼컴퓨터 + 10,000 GPU + 285,000 CPU cores  (* MS에 렌털비 $1B 지불)

엔지니어:  인공지능 박사급 120명 규모 (*  budgets  > $200 mil 연간기준 투입) 

 

 

Chat GPT 로직
Chat GPT 로직

 

 

 

 

[전략] ChatGPT 대화형 인공지능 모델구조

[전략] ChatGPT 대화형 인공지능 모델구조 2022년 11월 OpenAI가 발표한 ChatGPT 혁신이 계속되는데, ChatGPT 대화형 인공지능 모델구조가 어떤지 확인해 보았네요. ChatGPT는 프롬프트 대화형 InstructGPT 를 기

stephan-review.tistory.com

 

[전략] 대화형 인공지능: 구글 바드 vs MS ChatGPT

[전략] 대화형 인공지능: 구글 바드 vs MS ChatGPT 2022년 11월 발표된 MS ChatGPT가 인터넷 업계를 강타하고 있는데, 구글 바드는 제대로 준비가 되지 않은 듯 합니다. 구글이 최근 발표한 AI벤처에 5천억

stephan-review.tistory.com

 

[전략] 네이버 인공지능 클로바: 갈라파고스 vs 한국수성

[전략] 네이버 인공지능 클로바: 갈라파고스 vs 한국수성 2023년 8월 24일 네이버 하이퍼 클로바 서비스가 오픈되었는데, 네이버 자체설명 기준 ChatGPT 3.5 버전보다 우수하지만, GPT 4.0 버전보다는 못

stephan-review.tistory.com