워드프레스 ROBOTS.TXT 수정 차단 해제방법 3가지

워드프레스에서 검색엔진 로봇이 들어올 수 있도록 하기 위해서는 Robots.txt 파일을 수정을 하거나 파일을 새로 생성해서 넣어줘야합니다.

WEBMASTERTOOL.NAVER.COM
검색엔진 로봇이 수집이 가능합니다.
WEBMASTERTOOL.NAVER.COM

기본적으로 워드프레스 설정상 Robots.txt 차단하는 경우는 없지만 일부의 경우 검색엔진 수집을 하지 못하도록 차단하거나 다음 웹마스터도구검색엔진 등록을 위해서는 로봇을 수정해야 하는데 보통 이파일을 수정하기 위해서는 FTP 프로그램을 활용해 워드프레스 ROBOTS.TXT 수정해야 하지만 이부분이 어려운 분들을 위해 수정방법에 대해 알아보도록 하겠습니다.

가장 먼저 파일질라알FTP와 같은 프로그램을 통한 편집방법과 플러그인을 통한 수정방법이 있습니다.

FTP 프로그램을 통한 Robots.txt 수정방법

메모장 ROBOTS.TXT 만들기
메모장을 통해 워드프레스 ROBOTS.TXT 만들기

별도의 로봇을 수정하거나 만들고 싶다면 메모장을 열어 원하는 내용을 적어 저장합니다.

네이버 검색로봇만 접근 가능하게 설정

User-agent: Yeti
Allow: /
모든 검색엔진의 로봇에 대하여 접근 가능
User-agent: *
Allow: /
사이트의 루트 페이지만 접근 가능하게 설정
User-agent: *
Disallow: /
Allow: /$
로봇 접속 차단
워드프레스 ROBOTS.TXT 위치
워드프레스 ROBOTS.TXT 저장위치

저는 파일질라를 통해 자신의 워드프레스 계정에 접속합니다.

그리고 작성된 robots.txt 파일을 메모장으로 만들어 업로드 하거나 기존의 robots.txt 위치에 있는 파일을 열어 수정하고 재 업로드합니다.

워드프레스 robots.txt 위치는 최상위 www에 위치해 있으며 별도로 숨겨진 경우나 찾지 못하는 경우 플러그인으로 해결할 수 있습니다.

워드프레스 Robots.txt 수정 플러그인

robots.txt Editor Plugin

다른방법으로는 플러그인을 사용하느것으로 기본적으로 robots.txt Editor 가볍고 사용방법이 쉽습니다.

워드프레스 ROBOTS.TXT 수정 편집
워드프레스 ROBOTS.TXT 수정 편집

플러그인을 바로 설치하고 설정으로 들어갑니다.

기존의 로봇툴 코드에 원하는 문구를 추가하거나 삭제할 수 있습니다.

직접 FTP 프로그램을 사용하기 어렵다면 이러한 플러그인을 통해 워드프레스 ROBOTS.TXT 수정 하는것이 편리합니다.

Rank Math SEO Plugin

Edit Robots.txt
Edit Robots.txt

마지막으로 제가사용하는 방법으로 SEO 플러그인중에서 최근에 제가 사용하는 것으로 이를 사용하면 Edit Robots.TXT를 수정할 수 있어서 별도로 플러그인을 추가할 필요가 없고 사이트맵과 함께 다양한 기능을 제공해서 애용합니다.

이때 아래와 같이 사이트맵 파일도 함께 검색엔진에 허용하도록 설정하는것을 권장합니다.

User-agent: *
Disallow:

Sitemap: https://homepage.co.kr/sitemap.xml
Sitemap: https://homepage.co.kr/post-sitemap.xml

Disallow: /wp-admin/
Disallow: /readme.html

그 외에도 404 Monitor를 통해 오류를 확인하고 .Httaccess 파일을 수정하느것도 가능합니다.

참고 : SEO 인터넷 검색 최적화 글 작성방법

검색엔인 등록 요청방법

1 Response

  1. 2022년 10월 20일

    […] 참고 : 워드프레스 ROBOTS.TXT 수정 차단 해제방법 3가지 […]

답글 남기기

이메일 주소는 공개되지 않습니다. 필수 필드는 *로 표시됩니다