只允许主流搜索引擎抓取写法

只允许主流搜索引擎抓取写法,可以节省非主流搜索引擎耗费流量
User-agent: Baiduspider
Allow: /

User-agent: Googlebot
Allow: /

User-agent: 110Spider
Allow: /

User-agent: Sogou web spider/4.0
Allow: /

User-agent: *
Disallow: /

目前有:0条评论

留下脚印,证明你来过。发表评论:

*

*

分享:

支付宝

微信