구글봇 크롤링 속도 변경하기 - 서버에 부담되는 수준이라면

구글봇의 크롤링이 너무 잦아서 서버에 부담이 되는 수준이라고 하면 속도를 늦출 수 있습니다. 

 

다음 페이지는 소개 페이지입니다. 

 

support.google.com/webmasters/answer/48620?hl=ko

Googlebot 크롤링 속도 변경 - Search Console 고객센터

 

아래 페이지로 가면 관리하는 사이트의 주소를 클릭 한 후에 크롤링 속도를 조절할 수 있습니다. 

www.google.com/webmasters/tools/settings

Google Search Console

 

사이트 선택하고 'add property now' 선택

 

최대 크롤링 속도에 제한을 줄 수 있습니다. 가장 낮은 low로 하면 크롤링 속도가 현저히 줄어듭니다. 1천 이상 크롤링 하던 구글봇이 50회 내외로 줄더군요. 구글봇이 서버에 부담이 되는 것이 아니라면 건들 필요는 없어보입니다. 

 

현재 관리하는 워드프레스 사이트 하나를 적용해봤더니 크롤링 속도가 너무 늦어서 다시 원상복귀했습니다.