챗GPT 오류?? ChatGPT가 3.11과 3.9 중 큰 숫자를 구분하지 못해요 (2024.07 기준)

 

며칠전 팀원에게 챗GPT에게
3.11과 3.9 둘 중 어떤 숫자가 크냐고 물으면
틀린 답을 준다는 말을 들었다!
그게 말이 되나?

본인이 해보니 그렇다 한다

띠용! 정말 충격이다
당연히 오류가 많은 건 알지만
이렇게 굉장히 단순한 수 비교를 틀리다니.

나는 유료 버전의 GPT를 쓰고 있고
여러 개의 모델 (GPT4, GPT4 o, GPT mini)로
테스트를 해보았다.

기본적으로 영어로 질문을 먼저 하는 편이라
영어로 질문을 해 보았다.
위 스크린숏처럼 맞게 대답하는 것이 아닌가?

논리적으로 왜 그리 판단했는지도 잘 설명해 준다.

한국어로도 물어봤다.
 

 그런데 무언가 이상하다.
첫 문장에 3.11이 더 크다고 답한다.
이게 뭐선 일이야..?
그런데 자기가 논리를 정리하다 보니 서론과 다른 결론을 낸다.

소수점 이하를 동일하게 두 자리로 만들어서 비교하면 3.9 가 크다는 결론이 나온다는 것이다.

그래서 물어봤다

“너의 답에 논리적 오류가 있지 않니?”
 

 
응 내가 틀렸어! 하더니..
갑자기 소수점 뒤가 11과 9이니 3.11이 더 커!라고 자신의 답을 수정하겠다고 한다
OMG…🤦‍♀️

변형기출(?)을 내보았다.

3.8이 3.11 보다 커?라고 영어로 질문해 보았다.

 

 
이번에는 똑같은 논리 구조 (소수점 이하 자릿수를 동일하게 만든 뒤 비교 하는 방식)으로 풀어가더니
3.8이 크다고 옳은 답을 내놓는다.

너 왜 소수점 구분 틀려?라고 한국어로 질문하니
아래처럼 답한다

확실히 정정하겠습니다. 제가 이전에 설명한 내용이 잘못되었습니다. 숫자를 제대로 비교하려면 소수점 이하 자릿수의 차이를 명확히 이해해야 합니다.

다시 설명드리겠습니다:

3.8과 3.11을 비교할 때:

• 3.8을 소수점 두 자리로 확장하면 3.80이 됩니다.
• 3.11은 이미 소수점 두 자리로 되어 있습니다.

이제 비교해 보면:

• 3.80
• 3.11

여기서 80은 11보다 큽니다. 그러나 이 비교에서 중요한 점은 소수점 이하 자리 숫자를 확장하지 않아도 본래 숫자 비교는 가능합니다. 즉, 3.8은 소수점 첫자리에서 이미 3보다 크므로 소수점 이하 비교가 의미 없습니다.

결론적으로, 3.8은 3.11보다 큽니다.

하지만 원래 질문에 대한 정확한 답변은:

3.8은 3.11보다 작습니다. 소수 첫자리가 동일한 경우, 다음 자리를 비교합니다. 여기서 8은 11보다 작습니다.

따라서 최종 결론은:
3.11이 3.8보다 큽니다.

한 답변 안에서도 와따리 가따리 하다니.. 띠용

그래서 다시 지적하니 다시 정확한 결론을 도출한다.

너무나 스마트하다고 생각한 AI가
너무나 간단한 문제에 대한 틀린 답변을 내니
신뢰도가 바사사사삭하고 무너져 내리는 순간이다
왜 이런 오류가 생기는지 알고 싶다!

비슷한 키워드로 검색해 보니
그다지 큰 화제가 된 것 같지는 않다.
관련된 글이 얼마 없군.

역시 아직까지는 다행이게도(?)
인간 판단력과 직관이
그 존재의 의미를 가지게 되는구먼..
아직은 인간에게 조금 더 기회가 있나 봅니다
인간들 조금 더 잘, 열심히 살아봅시다!

다들 한번 해보세요! 언젠가는 고쳐지려나..

그럼 끝!