屏蔽z-blog的标签、归档、搜索

z-blog是我喜欢的blog系统，但是对于我这样闲散用户，内容不多，但是可能产生了很多标签，很多标签只有一个文章，甚至被删除了，文章一个没有，并且非常容易造成重复内容。即使删除了标签，被删除的那个标签搜索引擎仍然可以访问也不返回404错误。
归档，也是主要问题是重复内容。搜索产生的的链接比如http://www.xuandun.net/search.asp?q=php，有时候也可能会被收录。
这些问题客观上造成了内容重复，并且无法删除之，修改也很麻烦，并且修改不利于以后的升级，怎么办呢？
当然用robots.txt了，详细资料百度有个用法说明。http://www.baidu.com/search/robots.html
以下是我的robots.txt
User-agent: *
Disallow: /catalog.asp?date*
Disallow: /catalog.asp?tags*
Disallow: /catalog.asp?tags*
Disallow: /search.asp
多的不说了，分别是屏蔽归档、标签、搜索引擎，因为catalog.asp文件还担负着分类功能，所以不能直接就完全屏蔽，这个方法就可以完美解决了。 如果你觉得blog的信息量已经足够大，不会产生太多重复的话，只需删掉这个文件就可以了，也可以查阅资料自己调整。
测试robots.txt可以使用google网站管理员工具 在抓取工具访问里有测试robots.txt，在第一个框里输入您的的robots.txt内容，第二个框里输入测试地址就可以测试了。