闲来无事翻代码，发现一个好东西，Discuz设计者考虑到了有些流氓搜索引擎不遵守roborts.txt，于是设计了一个NOROBOT变量，当这个变量为true 的时候，定义中的搜索引擎都会无法访问，默认比如在post.php里面开头就定义了 define('NOROBOT', TRUE); 这样就可以有效防止蜘蛛乱爬了 但是至于像viewthread.php，for...

这里不在讲创建robots.txt文件的好处了，看用法