구글, Gemini 3.5 Flash의 환각 발생 빈도 공개 안 해
Google won't say how often Gemini 3.5 Flash hallucinates
TL;DR AI
1분핵심 요약
Mashable에 따르면 Google은 Google I/O에서 Gemini 3.5 Flash의 환각(hallucination)이나 아첨(sycophancy) 비율을 공개하지 않았다.
Anthropic과 OpenAI와 달리, Google은 이러한 신뢰성 지표를 공개적으로 보고하지 않고 있다.
대신 Google은 FACTS 벤치마크 정확도를 강조했으며, Gemini 3 Pro는 68.8%, 검색 기반 테스트에서는 83.8%를 제시했다.
Google은 Gemini 기반 검색 기능을 확대하는 가운데, 나머지 Gemini 3.5 시리즈의 추가 안전성 정보를 6월에 공개할 계획이다.