连续网页抓取出现断网？

Question

thread.sleep()
停个多少秒，程序请求很快的，不是你断就是iis断你,要么就超时

Answer 1

就这个myReq.Timeout   =   timeout; 
我设几秒也没用，开始以为程序连续抓取网卡负担太大，用thread.sleep()休眠30秒再抓，还是没用，几个之后还是断网 

Answer 2

看你的程序也没什么错误，我也以前也是这样抓的，就是抓的太快了会出现有几页没有的现像，sleep一下就好多了

Answer 3

设定好sleep就行了
不过，现在很多 ajax的网站这样写也可能抓不到！