Posts Tagged ‘robots’

• 二月

  11

  善用 robots.txt 优化 WordPress 博客

  望月 | Category: wordpress 43 Comments

  robots.txt（统一小写）是一种存放于网站根目录下的ASCII编码的文本文件，它通常告诉网络搜索引擎的漫游器（又称网络蜘蛛），此网站中的哪些内容是不能被搜索引擎的漫游器获取的，哪些是可以被（漫游器）获取的。via 维基百科 也许......