# [1] AI 봇 학습 및 무단 크롤링 차단 (표준 문법) User-agent: Amazonbot User-agent: Applebot-Extended User-agent: Bytespider User-agent: CCBot User-agent: ClaudeBot User-agent: Google-Extended User-agent: GPTBot User-agent: meta-externalagent Disallow: / # [2] 다음 웹마스터 도구 인증 #DaumWebMasterTool:0a1116854467722d1ce727016accddcc2845abd3d9f0d95d696f919a9e3a4d3b:2nG8ivfYj6diA57DvzIb3A== # [3] 모든 로봇에 대한 일반 설정 User-agent: * # 스팸 봇이 자주 노리는 경로 차단 Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /xmlrpc.php Disallow: /template.php # 관리자 페이지 차단 및 예외 허용 Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php # 전체 페이지 허용 Allow: / # [4] 사이트맵 위치 지정 Sitemap: https://yellowit.co.kr/page-sitemap.xml