牧羊人 發表於 2019-9-5 20:30:24

求助 百度蜘蛛大量爬我的网站。一个将近10g流量都是蜘蛛

<br /><br />求助 百度蜘蛛大量爬我的网站。一天时间将近10g流量都是蜘蛛爬的。&nbsp;&nbsp;我都不知道为什么中国蜘蛛老是来爬&nbsp;&nbsp;以前一天还有几十 个帖子。 爬打不开 一个新帖子也没有了。<br /> 原来用的虚拟主机， 换成服务器的话&nbsp;&nbsp;cpu2&nbsp; &nbsp;&nbsp;&nbsp;硬盘50&nbsp; &nbsp;&nbsp;&nbsp;宽带&nbsp;&nbsp;3m&nbsp;&nbsp;够不够？&nbsp; &nbsp;<br />没有用过 服务器&nbsp;&nbsp;不知道呀&nbsp; &nbsp;<br />知道的 朋友路过看看&nbsp; &nbsp;谢谢&nbsp;&nbsp;谢谢<br />蜘蛛<em>, </em>求助<em>, </em>百度<em>, </em>大量<em>, </em>我的

牧羊人 發表於 2019-9-5 20:42:48

在线急等

牧羊人 發表於 2019-9-5 21:22:55

不用等大家回复了。&nbsp;&nbsp;我找到问题根源了。&nbsp;&nbsp;在百度站长平台上， 以前是一天蜘蛛抓取几百次。&nbsp;&nbsp;最最近一月不知道怎么抽风了，一天平均将近20万次，现在已经设置最高不超过1300次了。&nbsp;&nbsp;应该可以了。&nbsp; &nbsp;

jnpar 發表於 2019-9-8 23:05:40

抓的频率那么高吗？是好事啊

牧羊人 發表於 2019-9-10 18:39:22

<br />事情倒是挺好，就是服务器受不了。&nbsp;&nbsp;乐极生悲 大概就是如此&nbsp;&nbsp;现在好了

牧羊人 發表於 2019-9-11 19:43:46

<br />能量量你的服务器配置吗？
頁: [1]
查看完整版本: 求助 百度蜘蛛大量爬我的网站。一个将近10g流量都是蜘蛛