httpclient

Question

出现一个很奇怪的问题,就是我用httpclient从几个网站上抓数据,别的网站都可以,就是有一个网站我程序一跑,它有时候抓个7条8条数据就卡在那了,有时候十几条,或者几十条,就不动了,郁闷死我了,不知道有哪位兄弟做过这个,望赐教,PS:程序应该没问题的,别的网站都可以跑,

Answer 1

网站问题，别纠结了，就一个爬不了，死不了吧？

Answer 2

别的网站对爬虫做了处理了吧
一般的网站都会针对爬虫做处理拦截

Answer 3

是不是那个服务器太烂了，没有读取网站的数据；或是带宽不行
有可能是人家处理了