xy1050060724技术博客

xy1050060724： 好了 耗资源我知道 但是内存cup带宽 才用了不到三分之一 cup是十几。。(2016-07-11 17:32)

回复

feiniao025：伪静态耗资源，最好静态或者把伪静态缓存下。换阿帕奇好了吗？(2016-07-11 16:45)

回复

xy1050060724： 网站是伪静态。我换了阿帕奇 程序。。(2016-07-11 09:54)

回复

feiniao025：蜘蛛爬的动态文件吗？(2016-07-08 10:28)

回复

xy1050060724：就一个站，带宽内存好像够，就是连接数突然增加好几百 网站就假死一段时间，然后就自动好了，如此循环，服务器内存 带宽 cup都使用不到三分之一。。求破 。(2016-07-08 08:02)

回复

动力火锅：一共多少个站？蜘蛛爬会占用很大的服务器资源和带宽，如果无节制的话服务器扛不住，带宽也将耗尽。 第一是服务器加内存，加带宽。 第二是去百度站长中心认证网站后可以调节网站抓取频率(此方法只适应百度蜘蛛为主的情况) 第三是全面禁止蜘蛛(2016-07-08 07:36)

回复

xy1050060724：除了加大工作者 还有别的方法么 已经干到128了 还是不行。。。(2016-07-07 23:37)

回复

动力火锅： 如果想继续维持百度蜘蛛爬行，只能加大工作者了。 09 k后台，虚拟主机，把网站工作者调大，默认开启的8(2016-07-07 19:00)

回复

xy1050060724：百度来一波蜘蛛 连接数就800+了 然后网站假死 。。。怎么破(2016-07-07 18:20)

回复

xy1050060724：经测试百度蜘蛛蜘蛛一天来快50w次了 是被百度蜘蛛爬死了。。 大流量怎么优化？(2016-07-07 18:09)

回复