Google 发布 Robots.txt 详细说明

　　站长和 SEO 从业者们有的忙了，Google 在上个周末发布了详细的 Robots.txt 标准，Robots 标签以及 X-Robots-Tag HTTP 头标准，如何控制 GoogleBot 抓取以及索引三个关键文档。我是对这东西完全没啥概念，实际上谷奥现在的 SEO 同样很糟糕，不知道有没有液内高手出手相助一下呢？先行谢过 Orz。

　　via sert

　　pic via GuiaBuscadores