tag

Tag:クローラ

2025-12-25

◆Tag:クローラに属するページの一覧です。

apache headerでクローラ制御
何らかの理由で例えばコンテンツに記述できない robots.txtで指定できない時、apacheのレスポンスヘッダを使う方法がある。 Debia

taxonomy