17C精品-亚洲色欲色欲www在线观看-午夜激情福利视频-婷婷综合色-亚洲成人精品在线观看-h片免费观看-欧美日韩一二三四-一起操在线-色噜噜一区二区-日韩av无码中文字幕-夜夜草影院-国产精品18久久久-2020av在线-草逼视频网-草草视频在线-波多野吉衣在线视频-日本激情视频在线观看-亚洲精品成-xxx国产在线观看-国产高清精品一区-99免费国产-日本十大三级艳星-a天堂视频在线-国内自拍视频一区-一区精品久久

百度會不會抓取百度推廣鏈接?

2013/10/6 9:53:00   閱讀:2310    發布者:2310

蜘蛛會不會抓取百度推廣鏈接?今日發現百度統計的SEO建議要求修改百度推廣鏈接后面的谷歌分析參數,說是“在靜態頁面上使用動態參數,會造成spider多次和重復抓取”。
但是推廣鏈接并不是24小時都存在的,百度蜘蛛是否真的會抓取推廣鏈接?

自己解決了。
查看了下百度首頁的robots.txt,發現百度禁止了蜘蛛抓取百度……
User-agent: Baiduspider
Disallow: /baidu
Disallow: /s?

所以推廣鏈接是不會被百度蜘蛛抓取到的。