|
:: 게시판
:: 이전 게시판
|
- 모두가 건전하게 즐길 수 있는 유머글을 올려주세요.
- 유게에서는 정치/종교 관련 등 논란성 글 및 개인 비방은 금지되어 있습니다.
통합규정 1.3 이용안내 인용"Pgr은 '명문화된 삭제규정'이 반드시 필요하지 않은 분을 환영합니다.법 없이도 사는 사람, 남에게 상처를 주지 않으면서 같이 이야기 나눌 수 있는 분이면 좋겠습니다."
24/01/23 16:26
(수정됨) 코딩할 때 보조로 쓰고 있긴 한데 Transformer 계열의 언어모델이 왜 숫자 계산이 되는지 아직도 이해가 안갑니다.
24/01/23 17:07
비슷한 결과를 내는 것만 해도 엄청납니다. 저는 이미지 쪽 딥러닝 일을 하고 있긴 해서 언어모델은 제대로 모르지만 진짜 신기하다고 생각해요.
24/01/23 16:48
GPT는 앞 단어를 듣고 뒷 단어를 예측하는 형식으로 학습하기 때문에, 계산을 전혀 염두에 두고 있지 않으니 계산이 되는 게 더 신기하죠. 곱셈의 원리를 이해하는 게 아니고, 많은 곱셈 식을 글자로 인식해서 보고 그 뒤 답을 '그럴듯하게' 만들기 때문에 틀릴 가능성이 더 높아야 하죠.
다만 학습량이 압도적으로 많아져서 수식도 많이 보게 되면 어느 정도 계산하는 능력이 갖춰지는 것 같아요.
24/01/23 17:05
티오 플라토님의 좋은 댓글처럼 Transformer(구글에서 연구한 언어모델의 유형인데 현재의 대규모 언어 모델들은 모두 이를 기초로 만들어졌다고 생각해도 무방) 계열의 언어모델은 문장을 해석할 때 비워진 곳을 예측하거나 문장의 다음 문자를 예측해서 단어를 만들어 내는 식으로 동작하는데 저 숫자들도 모두 문자로만 해석한다는 이야기죠. 그럴듯한 단어(문장) 생성에서 숫자 계산은 처음부터 고려된 영역이 아닙니다. 또 훈련 시키기에는 숫자 계산의 데이터가 일반화하기에는 쉽지 않고 무한한 데이터가 필요할 수 있죠. 그럴 듯한 문장을 만드는 언어모델에서 왜 계산 능력이 생겼는지 저는 신비하기만 하네요.
24/01/23 17:22
그래서 본인에게 물어봤습니다
너는 숫자계산을 위해 만든 ai가 아니라는데 어떻게 계산을 하는거야? ChatGPT 맞습니다, 저는 주로 자연어 이해와 생성에 중점을 둔 일반적인 인공 지능 모델입니다. 숫자 계산을 위한 전용 모델은 아니지만, 일반적인 수학적인 계산도 처리할 수 있습니다. 기본적으로는 사용자의 입력을 이해하고 적절한 답변을 생성하는 데에 중점을 두고 있습니다. 예를 들어, "두 숫자를 더해줘"라는 질문에 대해 답하는데, 내부적으로는 입력된 텍스트에서 의미를 추출하고 관련된 정보를 활용하여 답변을 생성합니다.
24/01/23 17:25
감사합니다. chatGPT에게 물어보는 방법이 있었네요. 역시 저는 아직 chatGPT 활용하는 능력을 키워야 할 것 같네요.
24/01/23 17:07
저 실제로 복붙했다가 10억을 1억으로 잘못 메일이나가서 (또 근데 어떤건 10억으로 계산 잘해서 속음) 황급히 정정한 적이 있습니다 ;
24/01/23 17:09
가만보면 챗GPT 랑 어떨때는 협상 내지는 흥정을 한다는 느낌이 들 때가 있습니다 크크
'야, 이건 아니잖아' '그럼 이걸로 하겠습니다' 이런 느낌...
|
||||||||||||||||
