광고 크롤러 오류 "robots.txt를 찾을 수 없음" 완벽해결!!

어느 날 아래 사진처럼 "광고 크롤러 오류가 있으며, 이 때문에 수익 손실이 발생할 수 있습니다."라는

경고 문이 구글 애드센스 메인 페이지에 게시되었다면, 이 포스팅이 완벽하게 해결해 드릴 겁니다.

여기서 말하는 크롤러란 쉽게 말해 우리 블로그 사이트의 정보를 수집하는 프로그램입니다.

그러니까 이 문제가 발생하는 이유는 "광고 크롤러가 블로그 정보를 수집할 수 없습니다"라는 뜻이며, 크롤러가 제대로 작동할 수 있도록 수정해 주어야 합니다.

그럼 문제 해결 방법을 설명하겠습니다.

<첫 번째 해야 할 일> 오류 페이지 정확한 문제 파악

· 오류가 있는 페이지 주소를 확인하기 위해, 게시된 "광고 크롤러 오류"에서 우측의 [작업]을 클릭합니다.

· 정책 센터 페이지로 이동하게 되며, 여기서 오류가 있는 페이지를 확인할 수 있습니다.

※ 상태에 "광고 게재 제한됨"이라고 되어 있지만, 정확하게 어떤 문제가 있는지 확인할 수 없습니다.

· 다음은 그 페이지의 정확한 문제를 파악하기 위해, 구글 서치 콘솔 사이트에서 "URL 검사"를 진행합니다.

· "URL 검사"를 한 결과, "Robots.txt를 찾을 수 없음"이라는 오류를 확인할 수 있습니다.

※ "Robots.txt"는 크롤러 취급에 대한 정보를 가진 파일입니다.

· 이제 오류를 확인했으니 문제 해결로 넘어가 보도록 하겠습니다.

<두 번째 해야 할 일> 티스토리 블로그에 Robots.txt 파일 업로드

· 두 번째 해야 할 일은 아래 링크에 들어가서 진행하시면 됩니다.

내 티스토리 블로그 정보 모든 검색엔진이 수집할 수 있게 하기!!

처음 티스토리 블로그를 만들게 되면, 각 종 검색엔진에 내 사이트의 정보를 수집할 수 있도록 설정해 주어야 합니다. 온라인상에는 수많은 사이트들이 있으며, 검색엔진에서 일일이 정보를 수

stop-by.co.kr

· 두 번째 순서도 진행하셨다면 다음으로 넘어가시면 됩니다.

<세 번째 해야 할 일> 구글 서치 콘솔에서 오류 페이지의 색인 생성 요청

· 구글 서치 콘솔에서 다시 "URL 검사"를 진행하면, 아래와 같이 문제가 해결된 것을 확인할 수 있습니다.

· 문제가 해결된 것이 확인되었다면 "색인 생성 요청"을 진행하시면 됩니다.

· 색인의 생성에는 수일의 시간이 필요하며, 다음에 확인해 보신다면 아래 사진과 같이 생성되는 것을 확인하실 수 있습니다.

좋은 하루 되십시오.

나도 알고 싶은 정보 - 뜬글