撰写robots.txt的注意事项

搜索引擎通过一种程序robots.txt（又称spider），自动访问互联网上的网页并获取网页信息。【详细】

robots.txt  2012-08-29

关于二级目录、二级域名的robots.txt设置

以下两点比较细节，一直被孤藤忽视，今天整理下，跟大家一起学习：关于二级目录、二级域名的robots.txt设置。【详细】

二级目录  二级域名  robots.txt  2012-06-28

分享seo必知的robots.txt文件设置

众所周知，robots.txt是网站和蜘蛛之间的一个协议，蜘蛛来到网站之后，会先查看这个文件，以确定自己是否应该对该网站进行爬取。所以robots文件是网站必备的一个文件，相信每个站长的网站根目录下都会有这...【详细】

seo  robots.txt  2012-05-18

站内优化“三剑客”

一个网站想要有一个好的排名就必须做好站内、站外的优化，相信大家一定看过很多关于站内或者站外优化的方法、秘笈、诀窍什么 的，有资深的SEO人员写的，有站长们自己的经验分享或者说是实战经验，今天跟大...【详细】

站内优化  三剑客  sitemap  404  Robots.txt  2012-05-12