앤트로픽이 정체성을 찾는 데 도움을 준 24시간 실험

앤트로픽은 프런티어 AI 제품 개발에서 전통적인 PRD보다 평가 세트가 더 중요하다고 말한다.

프롬프트·출력 테스트 케이스와 자동화를 통해 환각, 아첨(sycophancy), 급격한 성능 도약 같은 문제를 찾아낸다.

이러한 평가 중심 방식은 아키텍처 결정과 다음에 만들 기능을 정하는 데도 영향을 준다.

경쟁 모델에서 코딩 수요를 포착한 뒤 개발자 도구에 집중하게 되었고, 그 결과 Claude 3 Opus, Claude Code, Claude Opus 4.5로 이어졌다.

또한 2024년 Labs 팀을 만들어 정규 로드맵 밖의 실험적 아이디어를 탐색하고 있다.