UC知道apache日志如何记录百度谷歌等蜘蛛（追加分）
来源：百度知道 编辑：UC知道 时间：2024/06/08 06:15:27
<IfModule log_config_module>
LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined
LogFormat "%h %l %u %t \"%r\" %>s %b" common
<IfModule logio_module>
LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\" %I %O" combinedio
</IfModule>
CustomLog "logs/access.log" common
</IfModule>
这是我目前的设置，不记住主机名
哪位给我提供个范本 记录访问明细和主机头记录蜘蛛的
复制的不要来了
LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined
LogFormat "%h %l %u %t \"%r\" %>s %b" common
<IfModule logio_module>
LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\" %I %O" combinedio
</IfModule>
CustomLog "logs/access.log" common
</IfModule>
这是我目前的设置，不记住主机名
哪位给我提供个范本 记录访问明细和主机头记录蜘蛛的
复制的不要来了
你想要查看百度或者是谷歌的蜘蛛是否爬过自己的网站，我可以给你提供一下例子，呵呵，把自己的日志分享给你看一下，告诉你如何来看蜘蛛来访情况。
你打开网站的日志，在里面查找百度或者是谷歌蜘蛛的名字
百度的蜘蛛是baiduspider，谷歌的蜘蛛是Googlebot
然后可以看一下具体的情况，假如像下面这个例子：
GET /index.htm - 80 - 220.181.7.32 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0
它的含义是：来自220.181.7.32这个IP地址的百度蜘蛛来到你的网站，成功的抓取了index.htm首页，200代码表示的是成功抓取，404是错误页，还有一些其他的代码你可以在网上查一下。
希望通过上面的这个例子，你能了解自己站的情况。