구글 서치콘솔 '실패: Robots.txt를 찾을 수 없음' 색인 생성 요청 거부 해결 방법

구글 서치콘솔 '실패: Robots.txt를 찾을 수 없음' 색인 생성 요청 거부 해결 방법

안녕하세요.

오늘은 구글 서치콘솔 색인 생성 요청 거부 해결 방법을 알려드리려고 합니다.

구글에 글을 노출시키기 위해 구글 서치콘솔을 사용합니다.

 

 

 

 

여느때와 같이 URL을 검색하니 구글에 등록되어 있지 않다고 해서 색인 생성 요청을 했습니다.

그런데 어느 날, '색인 생성 요청이 거부됨'이라는 문구가 떴습니다.

 

 

 

색인 생성 요청이 거부됨

 

실시간 테스트 중에 URL에서 색인 생성 문제가 감지되었습니다. 라고 떠서 당황했어요.

계속 반복해도 똑같이 뜨길래 무슨 이유인가 궁금해서 실시간 테스트 보기를 눌렀습니다.

 

 

 

실패:Robots.txt를 찾을 수 없음

눌러보니 크롤링에 사용된 에이전트, 크롤링 허용 여부, 페이지 가져오기, 색인 생성 허용 여부 등이 떴는데요.

그중 '실패:Robots.txt를 찾을 수 없음'이 눈에 띄었습니다.

대체 이게 무슨 말이죠?

이해가 안 되어서 인터넷 검색을 해보았지만 이해가 되지 않았습니다.

비공개 글로 되어 있지 않는지 확인해보고,

h1 태그를 여러 번 썼는지도 확인해보았지만 전혀 문제가 없었습니다.

 

 

 

몇 번을 다시 시도해보았지만 여전히 결과는 똑같았습니다.

그래서 포기하고 다음 날 다시 시도해보았는데요.

 

실제 URL의 색인을 생성할 수 있는지 테스트 중

 

오랜 시간 실제 URL의 색인을 생성할 수 있는지 테스트를 했습니다.

또 색인 생성 요청 거부가 뜨겠거니 했는데 갑자기 요청이 되었다네요?

 

 

 

색인 생성 요청됨

 

결국 시간이 해결해주는 것이었습니다.

하루가 지나니 색인 생성 요청에 성공했습니다.

혹시나 '실패:Robots.txt를 찾을 수 없음'이 뜬다면 다음 날 다시 시도해보시길 바랍니다.

 

 

구글 서치 콘솔 바로가기

Google Search Console