爬虫发起抓取被服务器拒绝访问返回403

问:网页百度爬虫抓取不了是什么回事,以前几秒钟就能够抓取,今天一直抓取不了,而且百度也回馈是返回403

答:您好,经核实:

1. 测试访问站点提示连接重置无法正常访问,可能是该原因导致,现已手动重新同步配置文件,修正内部解析,测试访问正常(如图),若仍出现无法抓取的情况,我司可尝试为您切换国际出口线路,看是否正常.非常感谢您长期对我司的支持!

问:早上抓取正常,现在又不行了,正常可以访问,但是百度诊断是抓取不了

答:您好,

当前测试您主机运行正常,网站也可以访问,但因访问香港会经过国际出口,不排除线路原因所致,如抓取诊断也存在异常能否提供下具体的诊断错误信息截图我司核实下,非常感谢您长期对我司的支持!

问:链接响应代码错误时间zzvote.com/zhuce/4330.html502网址抓取UA抓取状态提交时间http://zzvote.com/PC抓取中  17:32http://zzvote.com/PC抓取中  17:32

问:一直提示抓取中,抓取不了

答:您好,

当前帮您调整了一个香港节点,请稍等30分钟左右再测试下抓取是否正常,另外香港主机优势主要在于免备案,访问易受到骨干线路和国际出口影响,如果可以建议您可以通过beian.vhostgo.com进行备案,备案后转到我司国内机房使用,这样访问速度和稳定性会更好,也利于收录,,非常感谢您长期对我司的支持!

更多关于云服务器域名注册虚拟主机的问题,请访问西部数码官网:www.west.cn
赞(0)
声明:本网站发布的内容(图片、视频和文字)以原创、转载和分享网络内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-62778877-8306;邮箱:fanjiao@west.cn。本站原创内容未经允许不得转载,或转载时需注明出处:西部数码知识库 » 爬虫发起抓取被服务器拒绝访问返回403

登录

找回密码

注册