返信先: @jYwNygさん 大昔個人サイトやってた時は、メタタグもrobots.txtもあくまでおまじない扱いで、本当に弾きたいなら.htaccsessにbotを書き連ねる形がテンプレだった記憶があるんですよ。今そのあたりどうなってるんでしょうね。逆にメタタグでオッケーのお行儀いいbotばかりになってるとか……？また調べてみますわ。