ROBOTS.TXT에 의해 차단됨 오류 발생 이유 구글 서치 콘솔 페이지 색인 생성을 하다 발견한 오류 robots.txt에 의해 차단됨. 이 오류가 나타난 이유에 대하여 알아보자. ROBOTS.TXT에 의해 차단됨 구글 서치 콘솔에서 페이지 색인 생성 확인을 하던 중 발견한 오류. 꾸준히 색인 생성 작업을 해도 색인 생성이 되지 않는 페이지가 있었다. 바로 guestbook이라는 링크의 페이지. guestbook? 잘 생각해보니 이 링크는 내 티스토리 주소의 방명록을 이야기 하고 있었다. 방명록에 있는 것이 없는데 왜 오류가 났을까 URL 검사를 하러 들어갔다. 페이지를 들어갔더니 이게 무슨 일인가. 페이지 색인 생성이 불가능하다고 적혀있다. 페이지 공개 상태 란에는 robots.txt에 의해 차단되었..