概要　一般的にSEO効果を高めるためにクローラ対策をするが、あえてクローラに来てほしくない時の対策とその検証手順を残したいと思います。　クローラに来てほしくないケースとしては、インターネット公開…