UC知道HTML网页能否加一段代码，避免蜘蛛搜索到？谢谢
来源：百度知道 编辑：UC知道 时间：2024/05/21 19:14:47
HTML网页能否加一段代码，避免蜘蛛搜索到？谢谢
不是整站拒绝啊，是某一个HTML网页。
不是整站拒绝啊，是某一个HTML网页。
不用写,只要在网站根目录下写一个robots.txt文件就可以了！具体格式是：
User-agent: *
Disallow: /Inc/
Disallow: /Js/
Disallow: /Admin/
表示INC、JS、Admin目录下的文件都不让蜘蛛访问！