网站地图抓取出现大量403

问:网站地图抓取出现大量403,我站本来有200多个页面 但是用工具抓取的时候出现大量的403,都不到100个页面链接  这个是怎么回事?,网站地图抓取出现大量403

答:您好,原因是您的抓取频率过大被系统识别为cc攻击而拦截,状态就是403,请降低频率,非常感谢您长期对我司的支持!

问:如何降低频率,请指导、谢谢?

答:您好,这个需要您自己找下支持降低抓取频率的sitemap工具了,简单的说就是访问量太大就会被主机系统认为是cc攻击而拦截,非常感谢您长期对我司的支持!

问:你们那边设置不了么?我换了几个抓起工具、都不行

问:你们可以设置一下你们服务器,之前一直用抓取工具的时候是正常的,为什么近几个月就这样了?

答:您好,抱歉, 虚拟主机无法调整,因为是多个用户共享服务器,不支持大量的访问,您可以升级为独立资源的云服务器,非常感谢您长期对我司的支持!

问:之前一直用抓取工具的时候是正常的,为什么近几个月就这样了?

答:您好,我们不清楚您的抓取工具,但cc攻击检测系统并不是今年才上线的,已经上线几年时间了,一直都有,同一ip访问量过大就会暂时拦截几分钟,状态返回就是403,请自行找sitemap工具,最好可以中途暂停的, 比如抓取10url个,休息一会再抓取10个url,非常感谢您长期对我司的支持!

问:这个没道理啊,如果你们一直都都存在的话 ,为什么之前用sitemap工具抓取就是正常的,现在抓取就是403了?

答:您好,抱歉,我们无法去追查您之前的情况,虚拟主机一直有cc防护系统检测,单个ip访问量过大,ip会被拦截出现403,这个无法改变,这本身也是为了保证虚拟主机稳定性,如果虚拟主机不加任何限制,那么随便几个ip就能造成巨大访问而导致虚拟主机宕机,如果要不受限制,可升级使用独立资源的云服务器产品,非常感谢您长期对我司的支持.由此给您带来的不便之处,敬请原谅!谢谢!

问:您好,域名修改好了,但是备案的公司名称的点还是无法写在中间,请协助修改,谢谢!

答:您好,请将将符号修改为“.”填写提交;提交后在此告知,为您在后台调整,非常感谢您长期对我司的支持.由此给您带来的不便之处,敬请原谅!谢谢! 

问:您好,我查不到业务备案码怎么办,谢谢!

答:您好,截图中此就是业务备案码,请任意选择其中一个备案码提交备案,非常感谢您长期对我司的支持.由此给您带来的不便之处,敬请原谅!谢谢!

问:您好,我需要提交吗,还是您帮我修改完公司名称再提交呢,谢谢!

答:您好,已协助修改名称,请点击导航栏“电子化核验”,使用手机微信扫描核验二维码,进入备案小程序拍摄上传备案资料,并确定提交审核,非常感谢您长期对我司的支持.由此给您带来的不便之处,敬请原谅!谢谢!

更多关于云服务器,域名注册,虚拟主机的问题,请访问西部数码官网:www.west.cn
赞(0)
声明:本网站发布的内容(图片、视频和文字)以原创、转载和分享网络内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-62778877-8306;邮箱:fanjiao@west.cn。本站原创内容未经允许不得转载,或转载时需注明出处:西部数码知识库 » 网站地图抓取出现大量403

登录

找回密码

注册