怎样查看网站服务器是否阻挡搜索蜘蛛

一般的网站是没有这个设置的，查看网站的robots.txt文件就可以了。
淘宝的就是全面屏蔽百度的。

--------------------
一般服务器不能，只有在网站里面设置才可以的。再说这样的服务器谁要啊。

阻挡蜘蛛的唯一方法是根目录下面的robots.txt文件，你看看你根目录下有没有，没有的话就是没有禁止，有的话，看看禁止了哪些目录。