2013.01.08 11:30

홈페이지 접속량이 늘어 매일마다 접속제한이 걸려 그 추이를 분석하고자 한다.

현재 사용중인 호스팅의 1일 접속 제한은 3GB이며, 보통 점심 쯤이면 접속이 제한되는 일이 비일비재하다.

접속량 추이를 보면 2012년 11월 이후 크게 트래픽이 2배정도 증가한것으로 보인다.

그나마 3GB에서 트래픽이 제한되었기에 이정도이다.

혹시 덧글 기능을 이용한 스팸으로 인한 문제점이 아닐까하여, 스팸 차단도 해보았지만 트래픽 제한에는 별 영향을 못미치고 있다. 아마도 스팸 덧글 등록에 실패해도 꾸준히 시도는 하고 있는듯하다.

일단 덧글 기능은 제거한 상태이므로 더이상의 스팸 덧글은 고민하지 않아도 될듯하다. ㅠ_ㅠ

대신 facebook의 덧글 기능과 방명록이 있으므로 크게 염려하지 않아도 될듯하다.

접속량 분석을 위해 호스팅 업체의 접속 통계 분석을 신청하여 확인해 봤더니…

헐..

bingbot의 하루 트래픽이 2GB 정도이다.

일단 robots.txt를 수정하여 bingbot 접속을 제한하였다.

어차피 혼자 글을 정리하려고 만든 블로그라서 홍보가 안돼도 별 상관 없다.

일단 하루 정도 추이를 지켜봐야겠다.

2013.01.09 09:22

robots.txt를 수정하여 bingbot의 접속을 제한한 후에도 bingbot이 접속한 기록은 보이지만 전송량은 늘어나지 않았다. robots.txt를 정상적으로 읽어서 엑세스를 제한한 것으로 보인다.

암튼.. 하루동안의 결과를 말하자면.. bingbot 차단 이후 호스트 계정의 전송량 최대치인 3GB를 넘지 않게 되었다.

bingbot을 제한하여도 한국에서 bing 검색은 daum에서 담당하므로 별 문제는 없겠지만.. 사이트맵을 제출하면 어떻게 될지 궁금해졌다.

사이트맵은 빙 웹 마스터 도구에 제출하여 SEO(Search Engine Optimization)에 도움을 줄 수 있으며, 이를 통해 bing에서 글의 우선순위에 따라 새로운 글들만 가져갔으면 좋겠다는 기대를 해보았다.

이를 위해 robots.txt 파일을 원상복구하여 bingbot 크롤러의 접속제한은 해제하였다.

16시경 bingbot이 다녀간 이후로 1GB 전송량이 빠져나갔다.

암튼.. 최종 결론은 bingbot을 차단하는 것으로 결정하였다.

robots.txt를 수정하고, sitemap 제출도 취소해서 전송량을 좀 진정시켜야겠다.

끝.