以下省略!

タイダルウ(ry ほぼ毎日1記事執筆運動実施中。 ※記事に広告(アフィリエイト)リンクを掲載している場合があります。

他のホスト宛のはずなのに自ホスト宛と扱ってしまう○○クローラー

アザラシ(記事画像は適当) PetalBotというクローラーがたまに意味不明なアクセスをしてくるのでrobots.txtでPetalBotに対してDisallow: /しておいたのは秘密。rita.linkのアクセスログを何気に眺めていたら明らかに他のホスト宛のはずなのに自ホスト(=rita.link)宛扱いでクロールしようとしているPetalBotを発見したので……。ちなみに運営はHuaweiである。万一robots.txtを貫通したらIP拒否の刑じゃよ。