用PHP写的,当然发到这了
不过能不能说说你做网络蜘蛛的思路???

解决方案 »

  1.   

    我先发到非技术区了,所以在一楼...
    发完帖发现可以自己转移帖子,于是转移到了PHP区 ^^
    我是用fsockopen取得目录,然后对目录用自写的Html解析类(主要靠正则表达式)进行解析.分析出需要的数据网页URL,然后再用fsockopen取得所需网页..再解析..最后提交到数据库.欢迎大家对这思路进行讨论.遇到一个没解决的问题是:
    数据库为mssql,表中有一列是 ntext 类型,提交的时候有一条SQL语句中,该列数据很大,超过64K,用MSSQL查询分析器提交不上去,请各位指教 :)
      

  2.   

    说得自己都糊涂了,"用fsockopen取得目录"中的目录是指 包含索引的网页
      

  3.   

    不一定要用MSSQL查询分析器来提交的呀,你直接在PHP里写SQL语句也是一样的嘛...