我前两天写了个简单的java程序,根据数据库里的内容(如关键字等),自动生成访问百度新闻搜索的URL,然后用流的方式获取搜索结果页面的html,并从中读取我所需要的数据(如:标题、摘要、链接、新闻的发布时间等),搜索结果的分页也会读取。
就是这样一个程序,运行了二十次左右之后,百度居然把我们公司的IP作为恶意访问IP给封掉了,整个办公室的电脑都进不了百度新闻的页面了……重起路由器,获取了新的动态IP之后,才恢复正常,想问问各位大侠,有什么办法解决吗?是不是放慢程序的读取速度就可以避免呢?那要慢到什么程度才行呢?
谢谢!!