问:我问了第三方工具提供方,对方说,爬虫采集过程安全狗会误报cc攻击,导致后面无法采集,将我们采集服务器ip地址添加安全狗白名单后就可以,我不知道怎么添加,还是sitemap采集的问题
答:您好,查看您是金牌服务,我们直接上到您的服务器上进行了确认,发现您服务器127.0.0.1并未安装安全软件,查看您的域名也没有三方cdn防护,所以一般不会有拦截,您可以将采集过程中的报错截图提供我司核实一下,谢谢。
问:我之前提交了一个工单的,你们太快关闭了,本来我想在上一个工单上找你们的
问:就是出现这种
答:您好,我们确认了一下防火墙上并无拦截您的sitemap抓取,并且就您截图来说,也并不是抓取拦截,一般拦截会造成抓取出现false的报错,但是您这个是已经抓取到了网页,只是标题出现了乱码。
我们测试其他一些工具是可以正常的抓取的,并无乱码产生,您可以尝试下使用其他的工具进行抓取,比如http://www.myip.cn/sitemapmaker 测试是没问题的,谢谢。
问:好的,谢谢
答:您好,不客气的,感谢您对我司长期的支持,如需帮助欢迎再联系我们。
问:服务器php版本怎么升级,你们能帮忙升级一下吗
答:您好,
php可使用建站助手直接安装后切换,可参考https://www.west.cn/faq/list.asp?unid=712 ,非常感谢您长期对我司的支持!
问:我没有代码
问:搞定了
答:您好,
好的,非常感谢您长期对我司的支持!
问:请问服务器里已有几个网站,可以再安装火车头采集器并且使用么?
答:您好,服务器并没有做限制的,支持的,非常感谢您长期对我司的支持!
问:请问空间的采集相关函数有没有开起来?我的帝国程序采集不了,在本地是可以采集的,怎么回事?
答:您好,
主机没有限制的,建议反馈下详细报错截图,已经测试方法,非常感谢您长期对我司的支持!
问:你好,我的网站是cleanwaking.top,我没有设置拒绝搜索引擎索引本站,没有设置robots.txt,但是,搜索引擎说我设置了robots.txt拒绝了搜索。
如何让搜索引擎尽快对我的网站进行收录?谢谢!
答:您好,
查看您主机目录西没有rebots.txt文件,服务器也没有对搜索引擎的限制,您可以到如百度站长平台https://ziyuan.baidu.com进行链接提交以提升被抓取的几率,非常感谢您长期对我司的支持!