问： robots.txt文件无异常，昨日起开始出现此问题；请排查是否服务器屏蔽？,google无法抓取网站robots.txt
答：您好，服务器方面近期未做调整，并未拦截谷歌蜘蛛抓取 ， 可以观察两天试下
非常感谢您长期对我司的支持,谢谢！
问：目前测试所有bot目前都无法抓取网站，请再仔细排查一下 谢谢！
答：您好， 此情况已经向机房反馈并跟进 ，
或者也可以回复此工单，我司为您临时切换到其他我司香港共享ip 节点再观察下，
可以过几天再反馈工单我司为你调整回现在的独立ip 地址 ，
非常感谢您长期对我司的支持,谢谢！
问：好的 麻烦先切换到共享IP我测试一下吧
答：您好， 已经协助切换了节点，请一个小时后测试 ，
非常感谢您长期对我司的支持,谢谢！
问： 更换完IP后 问题暂时解决
那届时如独立IP仍旧不可用 问题如何解决？
答：您好， 我司已经反馈机房相关问题，请耐心等待一段时间 ，
非常感谢您长期对我司的支持,谢谢！
问：从1月11日开始流量从一天200多M，此后每天增长，1月23日居然发生了6G的流量，主要是我这个网站根本没东西，也没在用，为什么会出现在何种情况。
答：您好，
非常抱歉，查看您的站点最近访问量非常大，logs目录下面生成的站点日志都有100多M，您可以下载日志文件到本地电脑分析；查看主要是google蜘蛛抓取的，如果不想要google蜘蛛抓取，可以参考http://www.west.cn/faq/list.asp?unid=662 屏蔽google蜘蛛抓取后再观察；非常感谢您长期对我司的支持!
问：网站可以正常域名访问 ，但是搜索引擎提示 您的服务器配置有误
答：您好，
1、非常抱歉，请问您给的截图是否是在百度站长平台验证robots.txt文件，目前您的站点根目录下没有robots.txt文件，因此提示404，robots.txt文件中的内容需要您根据自己的需求定义，然后上传robots.txt到站点根目录下；
2、如果您是要验证百度抓取，请您使用“抓取诊断”功能进行测试；非常感谢您长期对我司的支持!
