588创业论坛

标题: Robots.txt 错误检查器 [打印本页]

作者: 匿名 时间: 2011-9-7 11:40
标题: Robots.txt 错误检查器
下面推荐的这两个Robots.txt 错误检查器网站，两者实力相当，都可以发现robots.txt文件中的问题，并且还能发现不可见的错误。他们甚至还可以对文件中的隐藏代码作出解释，这些文件可以对搜索引擎爬虫产生影响。

http://tool.motoricerca.info/robots-checker.phtml
http://www.frobee.com/robots-txt-check

欢迎光临 588创业论坛 (http://bbs.588cy.com/)