Bing 검색엔진에서 Tistory의 크롤링이 불가능하다.

최근 bing의 웹마스터 툴에서 내 블로그의 크롤링이 중지되어 있는것을 발견하고

왜 그런지 로그를 찾아보고 있었다.

 

bing bot을 통해서 블로그 페이지 요청을 했을 때 403 forbidden 오류가 나오고 있었는데

 

티스토리 측에 문의를 했더니 처음에는 원인을 찾아보겠다고 하고 답변이 안오고 있어서

재차 같은 내용으로 문의를 했더니

 

다음 과 같은 메일이 왔다.

 

 

얼마나 크롤링을 자주 하길래 서비스에 부담을 주는지는 모르겠지만

일단 이와 같은 이유로 bing에서는 티스토리에 접근을 하지 못하기 때문에

검색엔진의 결과에 나올 수 없다.

 

사실… 구글, 네이버, 다음 정도말고는 국내에서 사용자가 많지 않기 때문에

크게 차이는 없겠지만… 해당 내용으로 검색을 해봐도 알고 있는 사람이 없어서 글로 남겨둔다.

 

현재의 403 의 이유는 티스토리 측에서 막았기 때문. 그리고 언제 풀릴지는 알 수 없다.