优化

wordpress的Robots.txt规则

WordPress的SEO默认做的已经非常强大了，当然也还有很大的优化空间。其中Robots.txt优化是Wordpress优化最重要的一个环节。搜索引擎对网页的抓取首先就是从读取的Robots.txt开始的。在Wordpress中，Robots.txt的作用主要就是屏蔽一些重复的内容放置被重复抓取。目前各种的Robots.txt的写法很多，但几乎功能都是一样的。robots.txt是一个存放在网站根目录下的文本文件，这个文件用于指定spider在您网站上的抓取范围，不但可以有效的节省搜索引擎对服务器带宽的占用，还可以提高网站在搜索引擎中的排名。使用WordPress搭建的博客，利用robots.txt文件限制搜索引擎抓取部分目录及文件，归纳大致有以下几种方法。最简单的开放写法：User-agent: *Disallow:使用说明：允许所有蜘蛛访问，允许访问所有内容。Wordpress只要模板中链接设计合理，没有需要限制的特殊内容，推荐使用这种写法。最简单的严格写法：User-agent: *Disallow: /wp-*Allow: /usr/uploads/Disallo

wordpress · 2012-10-12 · 1736 人浏览

Theme Jasmine by Kent Liao