구글애드센스 크롤러 호스팅 서버에 연결할 수 없음 해결방법

티스토리 애드 고시 신청 5주 만에 구글 애드센스 승인을 받았다. 설레는 마음으로 열심히 포스팅하고 있었는데 google publisher policy에서 메일이 왔다. 애드센스 게시자 정책 위반 보고서란다. 내용인즉 크롤러 호스팅 서버에 연결할 수 없음. 해결방법 공유한다.

 

애드센스 게시자 정책 위반 보고서

 

구글 애드센스 크롤러 호스팅 서버에 연결할 수 없음

구글애드센스 크롤러 오류 내용

 

문제가 있는 사이트, 문제가 있는 페이지로 크롤러: 호스팅 서버에 연결할 수 없음이라고 나오지만 보다시피 정책 위반 사항은 아님으로 이걸로 인해서 내 광고 코드가 제재를 당한다거나 하는 일은 없을 것이니 너무 걱정하지 않아도 된다.

 

광고 크롤러 오류가 있으며 이 때문에 수익 손실이 날 수도 있다는 경고 문구도 있다. 해당 티스토리 URL 접속해보니 글도 잘 뜨고 광고도 잘 나오고는 있는데 그래도 걱정된다. 구글 애드센스 수익이 크고 작고의 문제가 아니라 내가 애지중지하던 것에 문제가 생겼다는 문구 자체가 사실 달갑지만은 않다.

 

구글 애드센스 크롤러 호스팅 서버에 연결할 수 없음 해결방법

 

① 구글 서치 콘솔에 접속해서 티스토리 해당 URL 검사를 해본다. 크롤러 문제의 경우 구글 서치 콘솔 URL 검사에서 색인이 형성되어있지 않은 경우가 많다. 색인 요청 후 기다린다. 크롤링된 페이지는 생인이 생성된 결과와 같은 말이다.

 

② 구글 애드센스도 만능은 아니다. 가끔가다 오류가 생기기도 하니 하루 이틀 두고 보면 없어지는 경우도 있다. 단순해 보이는 이 방법이 사실은 가장 흔하게 해결되는 방법이다. 보통 예약 글을 쓰거나 글을 수정하거나 했을 때도 이런 경우가 생길 수 있으니 하루 이틀 지켜보자

 

③ 해당 URL 글 삭제 혹은 수정한다. 사이트 자체에 크롤링이 안된 것이 아니라 대게 특정 글, 특정 URL이 호스팅 서버에 연결할 수 없음이라고 나오기 때문에 해당 글을 삭제 혹은 수정하면 해결될 수도 있다. 

 

애드센스 크롤러 문제 해결에 액세스 문제를 누르면 뜨는 화면이 있는데 

 

애드센스 크롤러 문제해결 robots.txt

 

나도 이것저것 시도를 많이 하고 찾아보고 했었는데 그중 robots.txt 파일에서 크롤러 액세스 권한 부여하는 것이 있는데 위의 사진처럼 나온다

 

User-agent : mediapartners-google

Disallow: / 

 

robots.txt 파일을 업데이트하려면 robots.txt 파일에서 다음 두줄을 삭제하라고 나오는데 이건 티스토리나 우리 일반 구글 애드센스 이용자가 건드릴 수 없는 부분이다. 처음엔 이것도 모르고 네이버 서치 어드바이저 robots.txt 들어가서 티스토리 html에 robots.txt 파일 지웠다 다시 파일 추가했다가 난리도 아니었는데 알고 보니 이건 일반 티스토리나 구글 애드센스 이용 유저가 건드릴 수 없는 부분의 영역이었다... 이 글을 보는 이는 나처럼 바보 같은 일은 하지 않길 바란다

 

 

구글 애드센스 정책 위반 보고서 크롤러 호스팅 서버에 연결할 수 없음 해결방법에 대해 알아보았습니다. 중요한 것은 일단 구글 애드센스 정책 위반을 한 것은 아니라는 사실과 크롤링이 안 되는 문제의 경우 하루 이틀 내 없어지거나 그 외 위의 해결방법에 적힌 방법대로 하면 금방 해결될 수 있는 문제라는 것입니다. 그러니 너무 걱정하지 않으셔도 되겠습니다. 긴 글 읽어주셔서 감사합니다.