百度爬虫抓取不到哪些网站数据？

百度爬虫抓取不到哪些网站数据？

百度不是爬不到公众号的内容，应该是禁止了。搜狗是可以对公众号进行搜索的，搜狗现在已经是腾讯的全资子公司了，这是大公司之间竞争限制的原因。

在网站结构中，有一些内容是百度爬虫，无法抓取识别的，例如ifrom框架结构中的内容，比较复杂的js，还有flash，当然，对于图片和视频的内容，搜索引擎能抓取，但是也不能很好的识别。

如果是平台的话，像很多平台的吧，百度蜘蛛给封禁了，你看一下平台的robots文件就知道了。像淘宝中的很多内容，都是把百度蜘蛛给屏蔽掉了。

这个取决于站长的设置

同时也取决于百度的抓取机制

涉及隐私的，在爬之前阅读网站协议都会写哪些数据不能爬

你访问网站的/robots.txt 就知道了

但，有的搜索引擎不会悄悄抓禁止抓的数据，只是不展示出来。。。数据还是会拿走

百度抓不到APP内的数据；

抓不到客户端程序的数据；

抓不到爬虫协议中禁止百度的网站；

抓不到跟外部没有链接的网站。