php并发问题 最近有个项目,需要处理大量数据,一个进程下来需要大量时间,我就想着php能不能并发处理,如果能,要怎么弄? 问度娘,有个stream_select 函数 这个函数 懂得 能解释 举例一下吗 解决方案 » 免费领取超大流量手机卡,每月29元包185G流量+100分钟通话, 中国电信官方发货 web就是并发的啊。只是最高承受并发量是多少而己。可以用apache的ab来测一下,专业一点的用loadrunner这类工具来测 如果我要1000个任务同时进行 是不是要设计并同时打开1000个web页面,那还不恶心死 手工原始是这样,而且要同时请求,即同时刷新。。你做得到?所以有了工具,ab/loadrunner 不太明白你说的是一个怎么样的并发!如果单单的是统计数据的话,在linux下可以使用死循环来执行!然后使用php命令来执行,你的那个死循环文件或者是使用计划任务!!统计好的数据写入一个结果表里,然后直接读结果就ok了 我们目前项目里的积分系统是这样的!凡是加积分的操作,统一存库里,有一个表是积分记录表!另一个表是存储总积分的!后台有一个php的线程在运行,就是专门计算积分记录表里的数据,然后存到总积分的表里这是在linux下 *nix平台有多线程,请查阅手册其他平台需要借助web服务器的多线程记忆中php也有函数能对他太多的进程进行拒绝,没做过相关项目,所以没研究,只是看过手册 开多个进程就行了。不过你要自己根据业务逻辑,将任务拆分。比如你现在的程序要从1读到第1000个文件,然后将所有文件的内容统一写入到一个新文件newfile中。单进程的话,你肯定是做个1到1000的循环,读一个文件,就取新文件中追加一次。如果我开两个进程,就可以让进程一从第1个文件循环读到第500个文件,进程二从501个文件读到第1000个。这样等于就把一个大任务拆成两个任何并行执行了。在多cpu或多核心的机器上,理论上效率提高了一倍。但你要解决好并发写入的问题。因为两个进程都在同时向newfile写数据,一定会引发冲突,为了让他们写入文件无阻塞,所以最好不用文件锁。可以让两个进程都先写入一个临时文件(newfile1.tmp、newfile2.tmp...),等两个进程都执行完毕后,再将两个临时文件合并。当然,如果你开3个进程,理论上效率就提高了3倍,以此类推。这其实就是进程管理的知识。实际应用中,光有一堆子进程是不行的,你需要有一个主进程来对这些子进程进行调度、和管理。比如最后那个将所有临时文件合并的工作就应该由主进程来做,因为只有它能知道何时所有进程执行完毕。其实多线程也是这样的工作原理。 亲们 现在是一个文件 不是1000个文件 我现在的意思 差不多 是这样 一个函数a 然后有1w个数据 循环调用 1w次这个函数a 如果调用 一次这个函数a需要1s 那么单发就需要1ws 现在就想着并发 比如 分成 2个 并发同时进行 一个是 1-5000的数据循环调用a 一个是5001-1w的数据循环调用a 这样理论上时间 变为5000s依次类推 分成1000个并发进行 怎么实现 并发调用这个函数 我拿文件来说只是举个例子,你循环调用1万次这个函数,那么你开1w个进程,每个进程只调用一次,就实现并发的目的了。就像楼上老大说的,你如果需要等待返回结果,根据这个结果才能再执行下一次循环,那么就必须阻塞。否则就会造成数据一致性的问题。我举那个1000个文件的例子,是因为读写这1000次并没有绝对的依存关系。所以可以并发进行。如果不需要,那你完全可以开10000个进程每个进程调用一次。当然具体开多少个进程这个要根据很多因素来考虑,并不是开的越多越好。一般来说进程数量 = cpu核心数量最佳。至于怎么开多进程(php本身在windows上没法实现多线程,linux下到是可以借助系统来实现)。不是说让你开n个浏览器页面,你去查一下php cli模式。我们只是提供思路。具体如何拆分任务还是要最了解业务逻辑的你来思考。 apache2.2 与 php的连接问题 寻可以导出msn、QQ、126、163等邮箱通信录的php 用ems导excel数据入mysql后,汉字全变成乱码? 请问我用PHP生成的Excel表格中,为什么中文会变成乱码呢?郁闷中... 不能上传文件名为数字的文件...如何解决...????? 一个老问题:php中怎样隐藏javascript代码? 请大家来看看这段代码............ 紧急求急!答者有分。 麻烦帮忙看看下面的呆吗?谢谢 用php发邮件的问题 一般何种情况下定义常量? js 弹窗出现乱码了
可以用apache的ab来测一下,专业一点的用loadrunner这类工具来测
所以有了工具,ab/loadrunner
我们目前项目里的积分系统是这样的!凡是加积分的操作,统一存库里,有一个表是积分记录表!
另一个表是存储总积分的!后台有一个php的线程在运行,就是专门计算积分记录表里的数据,然后存到总积分的表里这是在linux下
其他平台需要借助web服务器的多线程记忆中php也有函数能对他太多的进程进行拒绝,没做过相关项目,所以没研究,只是看过手册
比如你现在的程序要从1读到第1000个文件,然后将所有文件的内容统一写入到一个新文件newfile中。单进程的话,你肯定是做个1到1000的循环,读一个文件,就取新文件中追加一次。如果我开两个进程,就可以让进程一从第1个文件循环读到第500个文件,进程二从501个文件读到第1000个。这样等于就把一个大任务拆成两个任何并行执行了。在多cpu或多核心的机器上,理论上效率提高了一倍。但你要解决好并发写入的问题。因为两个进程都在同时向newfile写数据,一定会引发冲突,为了让他们写入文件无阻塞,所以最好不用文件锁。可以让两个进程都先写入一个临时文件(newfile1.tmp、newfile2.tmp...),等两个进程都执行完毕后,再将两个临时文件合并。当然,如果你开3个进程,理论上效率就提高了3倍,以此类推。这其实就是进程管理的知识。实际应用中,光有一堆子进程是不行的,你需要有一个主进程来对这些子进程进行调度、和管理。比如最后那个将所有临时文件合并的工作就应该由主进程来做,因为只有它能知道何时所有进程执行完毕。其实多线程也是这样的工作原理。
如果调用 一次这个函数a需要1s 那么单发就需要1ws
现在就想着并发 比如 分成 2个 并发同时进行 一个是 1-5000的数据循环调用a 一个是5001-1w的数据循环调用a 这样理论上时间 变为5000s
依次类推 分成1000个并发进行
怎么实现 并发调用这个函数