请问怎么写个robot.txt来屏蔽百度蜘蛛呢?
来源:百度知道 编辑:UC知道 时间:2024/05/31 21:43:37
我想让要某个文件夹内的所有网页都屏蔽百度蜘蛛,这要怎么写呢?
在服务器的根目录下直接建这个文件,空的就行,百度就不会收录了
User-agent: Baiduspider
Disallow: /
UC知道是一部内容开放、自由的互动网络百科全书
客观、专业、权威的知识性百科全书
来源:百度知道 编辑:UC知道 时间:2024/05/31 21:43:37
在服务器的根目录下直接建这个文件,空的就行,百度就不会收录了
User-agent: Baiduspider
Disallow: /