블로그스팟 robots.txt 설정 해야 할까? 안해도 될까?
블로그스팟 robots.txt 설정 해야 할까? 안해도 될까? 오늘의 주제 “ 블로그스팟 robots.txt 설정, 과연 해야 할까요? 하지 말아야 할까요? ”에 대해서 자세하게 알아보겠습니다. 1. robots.txt란 뭔가요? 그럼, 먼저 이 녀석의 정체부터 알아봐야겠죠? robots.txt는 웹사이트의 문지기 같은 존재 입니다. “이방은 들어오세요~”, “저방은 출입금지요!” 라고 구글 봇, 네이버 봇, 다음 봇에게 안내하는 매너있…