최첨단 AI 5종으로 다양한 주장의 팩트체크를 해보니 67%에서 의견이 일치하지 않았다는 조사 결과
Survey Finds 5 Cutting-Edge AIs Disagreed on Claims 67% of the Time
TL;DR AI
1분핵심 요약
Lenz는 사용자 제출 주장 1,000개를 5개 최첨단 AI 모델로 검증해 672건에서 판단 불일치를 확인했다.
단 328개 주장만 모든 모델의 평가가 일치해, 같은 주장에 대해서도 모델마다 결론이 달라지는 사례가 많았다.
일부 주장은 다섯 모델이 모두 엇갈렸고, 이는 AI 팩트체크의 일관성 한계를 보여준다.
Lenz는 사람의 라벨을 함께 사용해 모델 판단이 인간과 어디서 달라지는지 분석하고 있다고 밝혔다.
같은 주제
