当前位置：首页
> 谷歌
网站禁止搜索引擎结果页被抓取的方法
在搜索引擎（例如百度，谷歌等）中看到一些网站的页面被搜索了大量的垃圾信息页面，其中一些搜索结果页还被索引，这些垃圾信息一旦被索引，就有可能被收录。如果不想搜索结果页面被收录的话，可以使用robots.txt和Robots Meta告诉搜索引擎不索引这些搜索结果页。一般 SEO 用的是robots.t...