百度后台抓取失败socket读写错误是什么原因,今天mzaz流量卡网在百度后台使用百度诊断抓取的时候一直提示失败,pc端抓取失败,但是手机端抓取正常,我们看到下面的图片能看到错误提示是socket 读写错误。
1、socket 读写错误一般什么情况下或造成
1.1、你的服务器开启了安全软件、比如安全狗、解决的办法就是直接关闭即可
1.2、像mzaz流量卡网是使用的是宝塔面板,开启了防火墙,这个时候应该就是防火墙的问题导致,直接关闭掉抓取成功了,说明就是他的问题了
2、难道开启宝塔防火墙插件会直接屏蔽百度蜘蛛抓取?
答案是什么:说是直接屏蔽的是模拟蜘蛛,不会屏蔽百度蜘蛛抓取,当然这个mzaz网自己也测试过,应该是不会的:
1、自己的网站一直都是在正常的收录
2、自己的网站记录百度蜘蛛抓取每天都能看到记录值
3、综合上面的俩个得出来的结论就是不会屏蔽百度蜘蛛,可能像上面说的会屏蔽掉模拟蜘蛛抓取。
这个问题说是一个小问题,当然也不能算小问题,如果真的屏蔽掉蜘蛛那么我们就得不偿失,肯定需要放弃防火墙了。