Bing 검색엔진에서 Tistory의 크롤링이 불가능하다.

최근 bing의 웹마스터 툴에서 내 블로그의 크롤링이 중지되어 있는것을 발견하고

왜 그런지 로그를 찾아보고 있었다.

 

bing bot을 통해서 블로그 페이지 요청을 했을 때 403 forbidden 오류가 나오고 있었는데

 

티스토리 측에 문의를 했더니 처음에는 원인을 찾아보겠다고 하고 답변이 안오고 있어서

재차 같은 내용으로 문의를 했더니

 

다음 과 같은 메일이 왔다.

 

티스토리 서비스 이용에 불편을 끼쳐 드려 죄송합니다.

우선, 문의하신 사항을 관련 담당자에게 전달하여 정확히 확인하는 과정에서
고객님께 신속하게 답변해 드리지 못한 점 사과의 말씀 드립니다.

현재 Bing에서 티스토리 서비스에 부담을 줄 만큼 
과도한 크롤링을 시도하고 있어 일시적으로 제한한 상태입니다.

아울러, 해제 시기는 확답드리기 어려운 점 양해 바랍니다. 

감사합니다.

 

얼마나 크롤링을 자주 하길래 서비스에 부담을 주는지는 모르겠지만

일단 이와 같은 이유로 bing에서는 티스토리에 접근을 하지 못하기 때문에

검색엔진의 결과에 나올 수 없다.

 

사실… 구글, 네이버, 다음 정도말고는 국내에서 사용자가 많지 않기 때문에

크게 차이는 없겠지만… 해당 내용으로 검색을 해봐도 알고 있는 사람이 없어서 글로 남겨둔다.

 

현재의 403 의 이유는 티스토리 측에서 막았기 때문. 그리고 언제 풀릴지는 알 수 없다.

2 thoughts on “Bing 검색엔진에서 Tistory의 크롤링이 불가능하다.

댓글 남기기