(記事画像は適当) PetalBotというクローラーがたまに意味不明なアクセスをしてくるのでrobots.txtでPetalBotに対してDisallow: /しておいたのは秘密。rita.linkのアクセスログを何気に眺めていたら明らかに他のホスト宛のはずなのに自ホスト(=rita.link)宛扱いでクロールしようとしているPetalBotを発見したので……。ちなみに運営はHuaweiである。万一robots.txtを貫通したらIP拒否の刑じゃよ。
(記事画像は適当) PetalBotというクローラーがたまに意味不明なアクセスをしてくるのでrobots.txtでPetalBotに対してDisallow: /しておいたのは秘密。rita.linkのアクセスログを何気に眺めていたら明らかに他のホスト宛のはずなのに自ホスト(=rita.link)宛扱いでクロールしようとしているPetalBotを発見したので……。ちなみに運営はHuaweiである。万一robots.txtを貫通したらIP拒否の刑じゃよ。