当前位置:首页 > 搜索和 robots协议 相关的文章

什么是robots协议,wordpress网站的robots协议怎么写

添加日期:2015-02-28 20:55:03 发布:smiling 
网站的robots协议也可以叫做爬虫协议,通过这些协议可以告诉搜索引擎蜘蛛网站的哪些内容可以抓取,哪些不能抓取。具体解释可以参照百度百科。关于wordpress网站的robots协议,八猫做了详细的梳理。 ...