티스토리 구글 서치콘솔 robots.txt에 의해 차단됨 초간편 해결방법

 

구글 서치콘솔의 페이지 색인이 생성되지 않는 이유 중 robots.txt에 의해 차단됨에 대한 원인과 간편한 해결방법에 대해 알아보겠습니다.

 

 

robot.txt에 의해 차단됨

 

혹시 아래와 같은 구글 서치콘솔 페이지 색인이 생성되지 않았다는 메일 또는 메시지를 받으셨나요?

robots.txt에 의해 차단됨

 

 

저도 이 메일을 받고 무슨 문제가 있는지 왜 차단되었다는 건지 불안하였습니다.

 

혹시 구글이 원하는 원칙을 지키지 않았다던가 실수로 어긴 것은 아닌가 걱정되었지만 하나씩 알아봅시다.

 

 

 

페이지 색인이 생성되지 않는 원인 확인

 

구글의 검색로봇이 내 티스토리를 크롤링하여야 정상적으로 노출되어 사람들이 볼 수 있는데 무언가 이유가 있다는 것이므로 문제의 원인을 알아야 합니다.

 

구글 서치콘솔 사이트에 접속해서 왼쪽 메뉴 중 페이지를 클릭해서 들어가 줍니다. 

구글 서치콘솔 메인

 

 

728x90

 

 

 

페이지에 들어가면 색인이 생성되지 않는 이유가 확인 될 텐데 클릭해 줍니다.

페이지 색인 생성 여부

 

 

 

그러면 밑에 어떤것들에 의해 차단되어 있는지 내역이 뜹니다.

그중 robots.txt에 의해 차단됨 항목을 클릭해 줍니다.

페이지 색인이 생성되지 않는 이유

 

 

 

해당 항목 클릭 후 차단된 예시가 나옵니다.

저는 guestbook과 search 두 개가 차단되었다고 보입니다.

robots.txt 차단 원인

 

 

 

반응형

 

 

robots.txt에 의해 차단됨 초간편 해결방법

 

확인한 guestbook, search 원인을 클릭하면 오른쪽에 보고서가 열립니다.

그럼 다음과 같은 내용이 보이는데 구글봇에서 무시되는 항목이 보입니다.

guestbook 차단된 원인

 

 

 

 

결론을 말씀드리면 위 항목들은 차단되는 것이 문제가 안됩니다.

위의 manage, owner, admin, search 차단된 목록은 모두 관리자 페이지에 속해있는 것입니다.

또한, guestbook은 방명록에 해당하는 것으로 구글봇이 크롤링할 필요가 없는 것이죠.

 

 

 

결국 구글 서치콘솔에서 차단되었다고 하는 robots.txt는 문제가 없다는 것이므로 걱정할 필요가 없습니다.

 

혹시 위 항목들이 아닌 다른 이유로 차단되었다면 서치콘솔 고객센터에서 내용 확인해 보시는 걸 추천드립니다.