抓取某个网站 本地正常 服务器上却很快便503

Question

发现了这么一个问题，抓取一个网站，在本地测试时，一切正常，但部署到服务器上，大概20来秒便都是503错误了，curl 某个链接 有这样的输出：

 <div style="margin-left:180px;width:695px;margin-top:72px;text-align:center">
            <h1 style="font-size:27px">503~~访问得太多了，请明天再访问</h1>
            <div style="background:#fff;height:341px;margin-top:32px">
                <div style="margin-top:100px;float:left">
                    <img style="float:left;margin-left:142px" src="http://www.xiachufang.com/pic/xiaohai.png">
                    <div style="margin-top:39px;text-align:left;padding-left:27px;float:left;">
                    <p>访问得太多了，请明天再访问</p>
                    </div>
                </div>
            </div>
        </div>

为什么同样的代码在服务器上与在本地就会不同呢？该怎么解决呢？

Answer 1

也有可能是空间服务商做的限制

Answer 2

访问次数太频繁，服务器会关闭你的请求，请控制访问频率，

Answer 3

服务器上硬件环境太好，速度当然快了。。做做限制

Answer 4

如果你的pc配置和服务器一样，带宽也一样，那就很奇怪～

Answer 5

请求速度过快了，脚本里面设置下sleep时间吧，在本地测试下阈值。

Answer 6

服务器上网速好，频率高，所以超限了。

你设置下服务器抓取频率

Answer 7

各位各位，同样的程序，为什么在我本地跑就没这个限制呢？

Answer 8

控制一下访问速度试试

Answer 9

就是，这么明显的提示