大規模サイトのクロール バジェット管理 | Google 検索セントラル | ドキュメント | Google for Developers
クロール バジェットとは、Google がサイトのクロールに費せる時間とリソースを表す容量です。クロールの理論、大規模サイトに推奨するクロールの管理方法等を紹介します。