请问如何设置论坛的robots.txt? 方便搜索引擎找到?

robots.txt是禁止搜索引擎采集的页面的东西.
应该是sitemap.xml这个文件才能让搜索引擎更好的检索你的网站

Robots.txt是一个纯文本文件，他是网站和搜索引擎之间的一个协议文件，当搜索引擎访问一个站点的时候，首先会检查网站根目录是否存在robots文件，如果有搜索引擎就会根据设置访问，没有就会直接索引。
Robots文件必须放在网站的更目录下面，而且文件名称必须是全部小写。