환각률이 가장 낮은 AI 모델 순위

반응형

이번에는 AI 모델 중 환각률이 가장 낮은 모델 순위에 대한 데이터가 있어 가져와보았다.

환각률이라고 하는 것은 생성 AI 등이 존재하지 않거나 인간이 인식할 수 없는 패턴이나 객체를 감지하여 부정확하거나 말이 안되는 출력을 생성하는 비율을 의미한다고 보시면 되고, 한마디로 잘못된 정보를 생성할 오류율 정도로 생각하시면 될듯. 갈수록 AI 모델이 잘못된 정보를 제공하지 않는 기술력을 가져가는 것도 중요한 부분이 되지 않을까 싶다.

​

​

환각률이 가장 낮은 상위 15개 AI 대규모언어모델을 조사했는데, 익숙한 이름들도 보이고 그렇지 않은 이름들도 보인다.

 

​

​

​

일단 뭐 눈엔 뭐만 보인다고(응?) ㅋㅋㅋㅋ 내눈에는 제미나이만 딱 들어왔음 ㅋㅋㅋㅋ 제미나이가 공동 1위를 차지했다!! 소리 질러~!!! 기분 나쁘게 중국의 뭔지 모를 AI가 공동 1위이긴 한데.. 솔직히 뭐 중국 AI 아무리 좋아도 그 AI 지들만 쓰지 해외로 수출되겠냐 싶기도.. ㅋㅋㅋ 그리고 이 환각률이라는 것도 데이터가 작으면 낮은 환각률을 보일 수 밖에 없다고 하는데 제미나이와 공동 1위를 한 지푸(?) AI 라는 모델은 더 작거나 특화된 모델이라고 한다. 한마디로 동급 체급에서는 제미나이가 가장 우수한 모습을 보여주었다는 것!

 

​

​

이 환각률이라는 것도 앞으로 AI 시대에 있어 더 중요한 지표라고 설명했는데, 그 이유는 AI 시스템이 갈수록 의학, 법률, 금융 등 정교하고 위험한 애플리케이션에 배치됨에 따라 점점 더 중요해지고 있다고 한다. 금융 같은데에서 AI가 환각을 일으켜 실수라도 하면 대형사고니까 ㄷㄷ

​

구글도 처음에 AI 늦었다고 얼마나 또 욕을 했었냐 이말이지...ㅋㅋㅋ 사실 딥마인드로 가장 먼저 AI 시대를 열었던게 구글이었는데.. ㅎㅎㅎ 그리고 결국 구글이 구글했다고 볼 수 있는 데이터였던 것 같다.

​

올해도 AI 트렌드로 다양한 기업들의 경쟁이 치열할 것으로 예상되는데, 농담반 진담반으로 이야기했지만 중국의 AI 기술도 무섭게 치고오는 느낌이라서 주의깊게 살펴봐야될 것 같다.