다른 4xx 문제로 인해 차단됨 해결방법

1. 첫 번째 오류 다른 4xx 문제로 인해 차단됨

이게 뭐라구 티스토리 블로그를 운영하면서 다양한 오류들을 만나게 됩니다. 특히 URL을 Google에 등록할 수 없다든지 색인이 생성되지 않은 페이지라든지 또는 특정조건이 충족되지 않아 생인이 생성되지 않는다는 메일이나 구글서치콘솔에 뜨면 은근히 기분이 상한 것은 사실입니다. 막상 알고 보면 큰 오류가 아니라고 그냥 두면 시간이 지나면서 사라지는 경우도 있다고 하지만 왠지 내 블로그에 오점인 것 같아서 해결해 보고 싶은 마음이 굴뚝같아요. 

 

 

 

 

다른 4xx 문제로 인해 차단됨 해결방법

 

 

그런데 문제는 이런 메일이 자주 온다는것에 있습니다. 메일을 클릭해 보면 티스토리주소옆에 "/reaction'이라는 생소한 주소가 생성된 페이지를 볼 수 있습니다. 하지만 주소를 넣어 검색해 보면 당연히 없는 페이지예요.

 

물론 내 블로그 주소는 검색이 잘 됩니다.

사실 이러한 구글서치콘솔의 오류는 해결할 방법이 없습니다.

 

 

다른 4xx 문제로 인해 차단됨 해결방법

 

 

색인생성이 되지 않은페이지가 너무 많아요. 이런 식으로 계속 글을 발행해도 될지 모르겠어요. 아래 사진을 보면 페이지 색인이 생성되지 않은 이유가 쭉 나열되어 있습니다. 정말 티스토리 블로그 어려운 것 같아요. 네이버 블로그는 이런저런 아무것도 모르고 글 발행을 했는데 이렇게 디테일하게 페이지 색인이 생성되지 않은 이유를 보여줘도 어떤 해결책이 없다는 것이 더 놀랍습니다.

 

 

 

다른 4xx 문제로 인해 차단됨 해결방법

 

 

 

 

두 번째 오류 robots.txt에 의해 차단됨

가장 흔한 오류는 바로 아래 거어요.

 

 

 

두 번째 오류에 대해서도 사유를 알아봐야겠어요. 해당 사유를 클릭해 보면 하단에 영향을 받은 페이지가 주르륵 나옵니다. 주소를 보니 모바일버전과 일반 PC버전의 guestbook 부분과 manage/entry라고 나오네요. 주소를 복사해서 인터넷 주소창에 넣어보면 어디서 오류가 났는지 금방 알 수 있습니다.

 

 

다른 4xx 문제로 인해 차단됨

 

 

 

robots.txt 테스트

차단 테스트를 눌러주면 어디서 오류가 났는지 빨갛게 라인이 그려져 있습니다. 하단으로 내려오면 다시 빨간 글씨로 차단됨이 보입니다.

 

이 모든 경고는 구글에서 페이지를 크롤링했지만 색인이 되지 않은 현상으로 이후 생성이 될 수도 있고 생성되지 않을 수도 있습니다. 이러한 문제는 나 스스로 해결할 수 있는 문제가 아니기 때문에 더욱 답답해지는데요. 이러한 문제가 발생하는 가장 근본적인 이유는 구글 로봇에 의해 크롤링에 문제가 있다는 것입니다. 

 

문제해결 방법이 없다

 

다양한 방법으로 문제해결을 해보려고 했지만 뾰족한 방법이 없습니다. 다만 색인요청을 다시 하거나 'sitemaps'에서 sitemaps와 rss를 다시 한번 제출해 보는 것도 방법입니다.

 

카카오에 문의해 보면 티스토리는 점점 안정화가 되어가고 있고 구글 검색엔진 또한 구글 서치콘솔에 대한 오류를 줄이기 위해 힘쓰고 있다는 답변만이 돌아옵니다. 해결할 수 있는 방법이 딱히 없다는 것이 속상할 뿐이네요.