Blogger Robots.txt 설정 따라하기 30초면 끝!

엔간한 블로그들 보다도 심플하기 그지없는 구글 블로거가 의외로 꾸미는 재미가 쏠쏠합니다. 커스터마이징에 능한 사람이 아니라면 처음에는 익숙지 않는 인터페이스 덕분에 약간 혼란스러울 수 있겠지만 사람은 익숙함에 능한 동물이라고 곧 자유롭게 사용하게 될 것입니다. 저도 이제 조금씩 익숙해지니 쓸만한 거 같네요.

[검색엔진의 봇에 본인의 블로그를 노출시키는 방법]

아래와 같이 따라가기민 하면 저절로 됩니다. 블로거 사이트에 접속후 설정-> 검색환경설정-> 크롤러 및 색인 생성-> 맞춤 robots.txt 따라갑니다.

 

디폴트 값은 공란입니다. 아무것도 없는 빈칸이지요.
여기에 입맛대로 설정하시면 됩니다.

User-agent:*
Disallow:/

이렇게 하면 검색엔진의 모든 봇에 내 블로그가 노출이 되지 않습니다.

User-agent:*
Disallow:

이렇게 하면 검색엔진의 모든 봇에 내 블로그가 노출됩니다.

/—- 샘플로 아래와 같이 입력하면 —-/

User-agent:Yeti
Disallow:
User-agent:Daumoa
Disallow:/

다음 검색의 봇은 막고 네이버는 허용한다는 뜻입니다.

아래는 검색엔진별 봇들입니다.

구글 : Googlebot
구글이미지 : googlebot-image
야후: Slurp
야후 이미지 : Yahoo-MMCrawler
MSN : MSNBOT
다음 : Daumoa

참고하시고 설정 시에 사용하시면 되겠습니다. 하나하나 알아가면서 즐거운 블로그 생활합시다.