如何编写实现站点爬行的程序?急!急!急! 去看希望出的"Programming Bots,Spiders,and Intelligent Agents in Microsoft Visual C++" (自动,查询和智能代理程序设计) RMB 66.0 有例子 解决方案 » 免费领取超大流量手机卡,每月29元包185G流量+100分钟通话, 中国电信官方发货 呵呵!我也考虑过这类程序,难在算法上主要可以抽象成一个二叉树的节点遍历问题但需要很复杂的逻辑设定,在设计时还需考虑很多其他因素,例如坏链接、镜像网站等资源占用的分配更是重中之重关键在于这个二叉树的层数不固定所以我的初步看法是提取连结时,进行语法分析,判断是否是本站或本地连结(镜像网站的判断很讨厌),如是,转入本站处理程序。(这个设计还比较简单)但外部连结处理则很麻烦,目前没有很好的算法,我又没法偷出百度、google的spider的源代码。呵呵!希望对你能有所帮助。 请教图标问题 如何调试内存泄露,数组越界等?? 关于ip寻址的头脑风暴~ 北京知名游戏公司招聘C++游戏开发职位 VC和VB的问题一则 如何周期性重启应用程序??我不想编程控制,类似windows中的任务计划,但它好象不能胜任这个功能 高手们过来指点指点呀! 谁有C或C++(不用MFC)的FTP客户端的例子? 哪个函数可以取得当前屏幕画面? CTime类的相减 怎样知道点击了标题栏?使用DefWindowProc函数? VC如何在拖动窗口时不显示虚框,而是实时拖动的?
主要可以抽象成一个二叉树的节点遍历问题
但需要很复杂的逻辑设定,在设计时还需考虑很多其他因素,例如坏链接、镜像网站等
资源占用的分配更是重中之重
关键在于这个二叉树的层数不固定所以我的初步看法是提取连结时,进行语法分析,判断是否是本站或本地连结(镜像网站的判断很讨厌),如是,转入本站处理程序。(这个设计还比较简单)
但外部连结处理则很麻烦,目前没有很好的算法,我又没法偷出百度、google的spider的源代码。呵呵!希望对你能有所帮助。