百度向来违反robots协议任意抓取

　　百度向来违反robots协议任意抓取网页内容，在seo业内已不是什么新鲜事儿，不过好像国内的搜索引擎基本都不遵循robots协议，还有那个什么鬼的国搜也是。

　　会长举微信公众号文章的例子说明一下。

　　微信公众号的文章是可以有原创标签保护的，如果有其他公众号抄袭你的文章，微信后台是能识别出来的，这是对原创文章的保护。

　　我们随便找一篇公众号下的原创文章，搜索一下其中的段落，发现如下情况：

　　该篇文章从标题到全部的内容被百度爬取并收录，另有网页快照为证。

　　再来看看微信公众平台的robots协议：https://mp.weixin.qq.com/robots.txt，并不允许搜索引擎spider爬取内页，不过百度还是完美的爬取了，值得表扬。

　　所以有些同学问为什么我屏蔽了某个目录还在抓取，不是你做的不对，而是百度吊炸天。

　　本文百度向来违反robots协议任意抓取由SEO讲师团队原创编辑，微信号：MBKFSEO666；我们专注于SEO线上培训，所以专业。