tag

Tag:クローラ

2019-10-21

◆Tag:クローラに属するページの一覧です。

apache headerでクローラ制御
何らかの理由で例えばコンテンツに記述できない robots.txtで指定できない時、apacheのレスポンスヘッダを使う方法がある。 Debia

taxonomy