1robots协议文件的创建 网站SEO优化与搜索引擎友好地对话，robotstxt文件无疑是最好的选择robotstxt文件可以告诉搜索引擎哪些是重点，哪些又是可以忽略的，节约搜索引擎蜘蛛抓取网页的时间，也在一定程度上节省了服务器资源。实际上在HTML标记中，有一个叫做NOFRAME的标记，如...