워드프레스 ROBOTS.TXT 수정 차단 해제방법 3가지
robots.txt 파일은 웹사이트의 루트 디렉토리에 위치하며, 검색엔진 크롤러가 웹사이트의 어느 부분을 크롤링하거나 크롤링하지 말아야 하는지 지시하는 역할을 하며 이 파일은 검색엔진의 자동 크롤러나 봇이 사이트에 접근할 때 처음으로 참조하는 파일로서 워드프레스에서 검색엔진 로봇이 들어올 수 있도록 하기 위해서는 Robots.txt 파일을 수정을 하거나 파일을 새로 생성해서 넣어줘야합니다. 기본적으로 워드프레스 설정상 Robots.txt 차단하는 경우는 없지만 일부의 경우 … Read more