最近获取谷歌搜索结果网页时发现获取的资源和正常情况不同。。

Question

目标获取谷歌搜索的前十页数据，但是发现越是后面的页面获取到的数值就越不确定。一下是源码 public string KeyWordIndexgoogle(string url)
        {
            string sdatagoogle = "";
            string newurl = "";
            for (int i = 0; i < 10; i++)
            {
                WebClient wc = new WebClient();
                sdatagoogle = wc.DownloadString(newurl);
                newurl= url();//获取下一页的地址
            }
        }
发现获取到的sdatagoogle中的东西和预期的不一样

Answer 1

频率不要过高，google对机器人行为非常敏感。要不多久你ip就要被封了

Answer 2

lz可以用个TIME控件,在里面定义每隔多长时间获取下这个页面的数据....如果像你那样循环的话,Google会封你的...