???spider吃大量内存

我下了个C# spider, 获取网页代码的程序，在跑了几十个网站就会突然发现进程吃了很多内存，怎么回事

解决方案 »

  1.   

    http://www.knowsky.com/4234.html就是这个，我改成url从文本读取
      

  2.   

    是否有VS 2005 team edtion?可以检查每个方法的CPU时间,内存等等.
      

  3.   

    C/S 的你写成 B/S当然会很占内存咯，要是你把控制脚本都传给用户应该就不会了
      

  4.   

    维护一个URL 队列 无论是在 内存 或者 文件中 都会很消耗资源爬行过程中URL的数量会快速增加  而且你要考虑去重  所以 问题很多 哪个例子实用很困难