http://www.7yan.com.cn/2007/12/28/how-to-write-robots-txt/ 喝雀巢饮料，吃雀巢食品，走雀巢人生！Nestle Life! Wed, 28 Jul 2010 00:37:06 +0000 http://wordpress.org/?v=2.9.2 hourly 1 http://www.7yan.com.cn/2007/12/28/how-to-write-robots-txt/comment-page-1/#comment-134 七言博客 - 针对WordPress博客seo的robots.txt Wed, 05 Mar 2008 06:25:47 +0000 http://www.7yan.com.cn/2007/12/28/how-to-write-robots-txt/#comment-134 [...] robot.txt文件，是用来指示搜索引擎机器人如何在您网站抓取内容并在检索结果中索引的重要文件。网站大多有文件和文件夹和搜索引擎优化（如图片目录或管理目录）没有关系的 ，因此建立一个robots.txt文件其实可以改善您的网站索引职能。 [...] [...] robot.txt文件，是用来指示搜索引擎机器人如何在您网站抓取内容并在检索结果中索引的重要文件。网站大多有文件和文件夹和搜索引擎优化（如图片目录或管理目录）没有关系的 ，因此建立一个robots.txt文件其实可以改善您的网站索引职能。 [...]

]]>