워드프레스용 llms.txt·robots.txt 설정 가이드(2026)
How to Set Up llms.txt and robots.txt for AI Crawlers on WordPress (2026 Guide)
TL;DR AI
1분핵심 요약
가이드가 워드프레스 콘텐츠를 AI 크롤러에 노출시키는 다섯 단계 절차를 제시한다.
robots.txt에서 GPTBot·PerplexityBot·ClaudeBot을 허용하고 WPCode·Yoast·Rank Math로 편집하라고 안내한다.
Cloudflare의 Bot Fight Mode를 끄고 서버 로그에서 크롤러 접근을 확인하라고 권한다.
루트에 llms.txt를 만들고 FAQPage·Article JSON-LD 스키마를 추가한 뒤 리치 결과 테스트로 검증하라.