티스토리 뷰
구글서치콘솔에서 ' robots.txt 에 의해 차단됨' 이라는 오류가 뜨면 블로그에 있는 글을 구글에서 색인할수 없다는 메세지와 함께 색인을 실패하게 됩니다. 블로그의 글을 잘 작성했는데 색인이 안된다면 다른 사람들은 이글을 볼수 없게 되므로 문제를 해결하고 블로그의 글을 차단하지 못하게 오류를 해결해 보겠습니다.
1. ' robots.txt 에 의해 차단됨'
검색 로봇이 인터넷 웹사이트에 액세스 하지 못하도록 robots.txt 파일에 해당 페이지에 대한 접금을 하지 못하도록 하는 상태를 말합니다. 고로 이 것은 구글서치콘솔에서 블로그를 검색할수 없다는 뜻이 됩니다.
서치콘솔에서 크롤링을 할수 없고 문제가 있어 해당 페이지를 찾을수 없다는 메세지가 뜨게 됩니다.
즉 웹사이트의 특정 부분이 구글에 의해 차단되어 검색에 뜨지 않는다는 뜻입니다.
구글 서치콘솔에서 색인 생성을 누르면 색인이 생성되지 않는다는 메세지가 뜹니다.
2. 색인 생성되지 않는 원인을 파악하기
색인 생성에 대한 원인을 파악하기 위해서는 메일을 확인해서 파악할수도 있고 구글 서치콘솔에 들어가서
robots.xml 에 의해 차단됨을 클릭합니다. 그러면 guestbook 에 의한 페이지 색인이 잘못되었다고 나온다면 방명록 페이지를 수정해 주어야 합니다.
ze="size16">
3. 티스토리 방명록 설정 변경하기
티스토리 블로그의 방명록에 문제가 있다는 것을 확인했으면 티스토리로 로그인해서 티스토리 댓글 방명록 관리자설정에서 변경하여 제어할수있도록 해야합니다.
① 티스토리 블로그 로그인후 관리 홈에서
② 댓글, 방명록 설정클릭
③ 로그인한 사용자만, 비허용으로 변경하고 변경된 내용을 저장해야만 합니다.
↓ 변경후
4. 구글서치콘솔에 사이트맵을 다시 제출합니다.
시간이 지나면 자연스럽게 수정되겠지만 바로 수정된것을 확인하고 싶다면 다시 사이트맵을 제출하여서 바로 확인히 가능합니다.
구글서치콘솔 의 sitemaps 클릭하고 새 사이트맴 추가에 sitemap.xml. 입력하고 제출을 클릭해 줍니다.
5. 다시 url 검사하기
사이트에 메일을 통해서 결과확인이 가능하지만 수정후 url 을 다시 검사하여 크롤링 되는것을 확인해 봅니다.
바로되지 않고 시간이 걸리는 경우도 있지만 바로 확인하는 것이 속 시원하겠지요.
이렇게 robots.txt에 의해 차단됨이라는 오류로 인한 문제를 해결해 보았습니다. 열심히 작성한 블로그나 글들이 노출되지 않는일이 없도록 바로 바로 수정하는 것이 좋습니다. 검색엔진에서 검색되지 않는다는것은 블로그 작성하는 입장에서 큰 문제중에 하나입니다. 검색엔진 클롤러가 웹사이트를 크롤링할때 중요시 되는 문제이자 웹페이지 수집과 속도향상등에 많은 영향은 주는 robots.txt 파일이므로 오류해결을 하였습니다.
2024.06.18 - [분류 전체보기] - 네이버 서치 어드바이저 등록 방법. 티스토리 rss 사이트맵 제출하기
2024.06.06 - [분류 전체보기] - 모바일 신분증 모바일 운전면허증 발급