最近有个项目,需要处理大量数据,一个进程下来需要大量时间,我就想着php能不能并发处理,如果能,要怎么弄?  问度娘,有个stream_select 函数  这个函数 懂得 能解释 举例一下吗

解决方案 »

  1.   

    web就是并发的啊。只是最高承受并发量是多少而己。
    可以用apache的ab来测一下,专业一点的用loadrunner这类工具来测
      

  2.   

    如果我要1000个任务同时进行 是不是要设计并同时打开1000个web页面,那还不恶心死
      

  3.   

    手工原始是这样,而且要同时请求,即同时刷新。。你做得到?
    所以有了工具,ab/loadrunner
      

  4.   

    不太明白你说的是一个怎么样的并发!如果单单的是统计数据的话,在linux下可以使用死循环来执行!然后使用php命令来执行,你的那个死循环文件或者是使用计划任务!!统计好的数据写入一个结果表里,然后直接读结果就ok了
      

  5.   


    我们目前项目里的积分系统是这样的!凡是加积分的操作,统一存库里,有一个表是积分记录表!
    另一个表是存储总积分的!后台有一个php的线程在运行,就是专门计算积分记录表里的数据,然后存到总积分的表里这是在linux下
      

  6.   

    *nix平台有多线程,请查阅手册
    其他平台需要借助web服务器的多线程记忆中php也有函数能对他太多的进程进行拒绝,没做过相关项目,所以没研究,只是看过手册
      

  7.   

    开多个进程就行了。不过你要自己根据业务逻辑,将任务拆分。
    比如你现在的程序要从1读到第1000个文件,然后将所有文件的内容统一写入到一个新文件newfile中。单进程的话,你肯定是做个1到1000的循环,读一个文件,就取新文件中追加一次。如果我开两个进程,就可以让进程一从第1个文件循环读到第500个文件,进程二从501个文件读到第1000个。这样等于就把一个大任务拆成两个任何并行执行了。在多cpu或多核心的机器上,理论上效率提高了一倍。但你要解决好并发写入的问题。因为两个进程都在同时向newfile写数据,一定会引发冲突,为了让他们写入文件无阻塞,所以最好不用文件锁。可以让两个进程都先写入一个临时文件(newfile1.tmp、newfile2.tmp...),等两个进程都执行完毕后,再将两个临时文件合并。当然,如果你开3个进程,理论上效率就提高了3倍,以此类推。这其实就是进程管理的知识。实际应用中,光有一堆子进程是不行的,你需要有一个主进程来对这些子进程进行调度、和管理。比如最后那个将所有临时文件合并的工作就应该由主进程来做,因为只有它能知道何时所有进程执行完毕。其实多线程也是这样的工作原理。
      

  8.   

    亲们 现在是一个文件 不是1000个文件 我现在的意思 差不多 是这样  一个函数a 然后有1w个数据   循环调用 1w次这个函数a 
    如果调用 一次这个函数a需要1s  那么单发就需要1ws  
    现在就想着并发 比如 分成  2个  并发同时进行   一个是 1-5000的数据循环调用a 一个是5001-1w的数据循环调用a  这样理论上时间 变为5000s
    依次类推 分成1000个并发进行 
    怎么实现 并发调用这个函数
      

  9.   

    我拿文件来说只是举个例子,你循环调用1万次这个函数,那么你开1w个进程,每个进程只调用一次,就实现并发的目的了。就像楼上老大说的,你如果需要等待返回结果,根据这个结果才能再执行下一次循环,那么就必须阻塞。否则就会造成数据一致性的问题。我举那个1000个文件的例子,是因为读写这1000次并没有绝对的依存关系。所以可以并发进行。如果不需要,那你完全可以开10000个进程每个进程调用一次。当然具体开多少个进程这个要根据很多因素来考虑,并不是开的越多越好。一般来说进程数量 = cpu核心数量最佳。至于怎么开多进程(php本身在windows上没法实现多线程,linux下到是可以借助系统来实现)。不是说让你开n个浏览器页面,你去查一下php cli模式。我们只是提供思路。具体如何拆分任务还是要最了解业务逻辑的你来思考。