블로그스팟 맞춤 robots.txt 사용 설정 방법

  블로그스팟은 티스토리와 달리 robots.txt 설정을 할 수 있다는 장점이 있습니다. 그러나 워드프레스와 달리 FTP의 루트 디렉토리에 직접 올리는 방식이 아닌 구글 블로그스팟 설정에서 맞춤 robots.txt 사용설정을 할 수 있는 부분을 두고 있습니다. 

블로그스팟 맞춤 robots.txt 사용 설정 방법

 

 

사용설정을 우측으로 토글해서 활성화 시킵니다.

 

맞춤 robots.txt 모습

블로그스팟의 robots.txt 기본 세팅

초기 세팅은 보통 아래와 같습니다. 

User-agent: Mediapartners-Google

Disallow: 

Allow:/

User-agent: *

Disallow: /search

Allow: /

Sitemap: https://도메인/sitemap.xml

 

블로그스팟의 맞춤 robots.txt 추가로 세팅해야 할 것

우선 위에 기본적으로 블로그스팟은 기본적으로 search 디렉토리를 차단하고 있습니다. 그러나 tag(레이블)로 메뉴를 만들 경우에는 메뉴에 해당되는 부분은 robots.txt파일에서 허락해줘야 검색엔진에 노출이 됩니다. 이 블로그의 경우 5개의 메뉴가 있으니 그걸 allow 해줍니다. 

 

예시) Allow: /search/label/블로그스팟

네이버 검색로봇도 허락할 수 있습니다. 

User-agent: Yeti

Allow:/

다음 검색 로봇도 허락할 수 있습니다.

User-agent:Daum

Allow: /