“색인은 생성되었으나 robots.txt에 의해 차단됨”티스토리 블로그를 열심히 운영하다 보면 어느 날 구글 서치콘솔에서 이런 메시지를 보게 됩니다. 블로그를 열심히 키우고 있는데, 정작 구글 검색에 노출이 안 된다면 얼마나 허탈할까요? 오늘은 많은 티스토리 유저들이 겪는 색인 차단 문제의 원인과 해결법을 안내드립니다.1. 이 메시지는 도대체 뭐야?구글 검색 콘솔에서 “색인은 됐지만 robots.txt에 의해 차단됨”이라는 말은 간단히 말해서, 구글이 블로그를 발견했지만 내부 콘텐츠를 크롤링(읽기)할 수 없도록 막혀 있다는 뜻입니다.이건 마치 누가 집 초인종을 눌렀는데 안에서 “들어오지 마세요”라고 소리치는 것과 같죠. 구글은 의외로 말 잘 듣는 친구라서, 막혀 있으면 안 들어갑니다. 결과적으로 검색엔진..
