특정 봇을 차단하는 이유
워드프레스로 블로그를 운영할 때, 특정 봇을 차단하고 싶을 때가 있다. 예를 들어서 네이버나 다음에 내 글이 올라가기 원하지 않는 경우이다. 물론 네이버와 다음에 글이 올라가지 않으면 방문객이 현저하게 떨어질 수 있지만, 테스트 사이트를 운영하거나 할 때가 있을 수 있다. 아래는 네이버나 다음 봇을 차단하는 법입니다.
 |
| 워드프레스 네이버, 다음 봇 차단하는 법 Robots.txt |
Robots.txt 파일을 이용하자
티스토리와 달리 워드프레스는 robots.txt파일을 업로드할 수 있다. 그래서 특정 봇을 차단할 수 있다.는 장점이 있습니다. robots.txt파일은 서버의 보통 루트 디렉토리에 올린다.
Robots.txt 파일에 추가하는 법
보통 아래와 같이 해준다. 특정 폴더를 허락할 수도 차단할 수도 있다.
모든 봇에게 특정 폴더 허용 혹은 차단은 아래와 같이 했다.
User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-admin/
네어버 봇, 다음 봇을 차단하는 법
아래와 같이 하면 가능하다.
모든 봇 허용
User-agent: *
Allow: /
네이버 봇 예티 차단
User-agent:Yeti
Disallow: /
다음 봇 다음모아 차단
User-agent:Daumoa
Disallow: /