a차단 (1) 썸네일형 리스트형 구글 페이지스피드 Robots.txt AI봇 차단 해결후기 웹사이트 운영자라면 한 번쯤 마주하게 되는 구글 서치콘솔과 페이지스피드 인사이트의 빨간 경고등. 최근 저도 robots.txt 유효성 오류와 REST API 403 Forbidden 문제를 해결하며 진땀을 뺐습니다.우선 저는 워드프레스에서 클라우드플레어에 연동한 뒤 AI봇 차단이 문제가 되었느데요 이에 클라우드플레어(Cloudflare)와 워드프레스 환경에서 발생하는 주요 기술적 오류들을 어떻게 완벽하게 해결했는지, 그 과정과 최적화 코드를 공유해 드립니다.📌 주요 해결 내용 요약✅ robots.txt Unknown directive: 클라우드플레어 비표준 지시어 제거 및 표준화✅ REST API 403 Forbidden: 서버 루프백 통신 및 PHP 핸들러 버전 충돌 수정✅ AI 봇 차단: GPTBo.. 이전 1 다음
