Skill Self-Play: 공진화하는 스킬로 LLM 역량의 최전선을 넓히다

연구진이 대규모 언어 모델의 자기개선을 위한 강화학습 프레임워크 ‘Skill Self-Play’를 제안했다.

이 방식은 작업 제안자, 해결기, 스킬 컨트롤러가 함께 진화하며 스킬을 샘플링하고 과제를 생성·해결한 뒤 실행 피드백으로 스킬 라이브러리를 확장한다.

목표는 열린 과제 다양성과 신뢰할 수 있는 검증을 동시에 확보해, 좁은 환경이나 불안정한 자가 생성 과제의 한계를 줄이는 것이다.

도구 사용 및 추론 벤치마크 실험에서 성능 향상 가능성이 확인됐으며, 약한 모델의 회복과 확장에도 도움이 될 수 있다.