Google のクロール頻度の高さが原因でサーバーに高負荷がかかっている時に、Googlebot のクロール頻度を下げる方法や、サイトのクロールを停止する方法を紹介します。