본문 바로가기
숨 쉽니다! 쉬어요~

'색인이 생성되었으나 robots.txt에 의해 차단됨' 해결 방법

by 룩식 2019. 12. 22.

이런 이메일을 한통 받았습니다!!

아마도, 같은 내용의 메일을 받으신 분들이 이 게시물을 읽으실거라고 생각합니다.

 

 

 

"사이트 https://loogigame.tistory.com/에서 새로운 적용 범위 문제가 발견됨" 이라는 제목입니다.

 

티스토리 뭐가 잘못된것인가!!! 놀라서 메일을 읽어보았습ㅂ니다.

 

주요 경고라는 내용으로 "색인이 생성되었으나 robots.txt에 의해 차단됨"이 눈에 띕니다.

 

검색에 노출이 정상적으로 될수있도록 색인이 생성되었지만,

검색 수집 로봇이 그 것을 차단했다는 내용으로 보입니다.

 

 

자세히 확인해보기 위해 메일에 있는 [적용 범위 문제 해결하기] 버튼을 눌러줍니다.

해당 버튼은 구글 서치 콘솔 사이트의 링크입니다.

 

 

 

동일한 내용에 관한 정보가 표로 정리되어 나옵니다.

 

"색인이 생성되었으나 robots.txt에 의해 차단됨"

해당 문제가 언제부터 몇개의 페이지, 어떤 페이지가 해당하는지에 관한 내용입니다.

 

제일 하단의 [ https://loogigame.tistory.com/manage/entry/post ] URL이 문제이네요.

 

그런데 '/manage' 는 티스토리의 관리자 페이지에 해당합니다.

 

확인해보기위해 해당 링크 [ https://loogigame.tistory.com/manage/entry/post ]로 들어가보시면 게시물 작성 페이지 등의 관리자 페이지가 나오는 것을 확인 하실 수 있습니다.

 

 

네이버 웹마스터 도구의 검증 메뉴를 통해 한번 더 확인해봤습니다.

(네이버 웹마스터 도구는 [링크] 요기로 들어가면 보실 수 있습니다. 우측 상단에 웹마스터 도구 - 검증 으로 가세요)

 

 

 

웹마스터 도구 - 검증 - robots.txt에 들어가서 로봇룰 검증을 확인해봅니다.

모든 검색 엔진에서(User-agent: *) 티스토리 관리페이지 관련 URL로(Disallow: /manage) 접근을 막는다.

 

그 말은 검색용 봇이 나의 티스토리 관리 페이지는 노출 시키지 않도록 제대로 작동하고 있다. 라는 뜻이 되겠습니다.

 

즉, 해결법은 걱정하지 말고 열심히 포스팅이나 하면된다! 고 할 수 있겠네요.

 

 

 

그럼, 여기까지 '색인이 생성되었으나 robots.txt에 의해 차단됨' 해결 방법이었습니다.

 

모두 즐거운 블로깅하세욥!!  ;-)

댓글