PHP100 2019-03-27
(伪)多线程:借助外力
利用WEB服务器本身的多线程来处理,从WEB服务器多次调用我们需要实现多线程的程序。
QUOTE:
我们知道PHP本身是不支持多线程的, 但是我们的WEB服务器是支持多线程的.
也就是说可以同时让多人一起访问. 这也是我在PHP中实现多线程的基础.
假设我们现在运行的是a.php这个文件. 但是我在程序中又请求WEB服务器运行另一个b.php
那么这两个文件将是同时执行的.
(PS: 一个链接请求发送之后, WEB服务器就会执行它, 而不管客户端是否已经退出)
有些时候, 我们想运行的不是另一个文件, 而是本文件中的一部分代码.该怎么办呢?
其实可是通过参数来控制a.php来运行哪一段程序.
下面看一个例子:
代码如下:
<?php function runThread(){ $fp = fsockopen('localhost', 80, $errno, $errmsg); fputs($fp, "GET /a.php?act=brnrn");//这里的第二个参数是HTTP协议中规定的请求头,不明白的请看RFC中的定义 fclose($fp); } function a(){ $fp = fopen('result_a.log', 'w'); fputs($fp, 'Set in ' . Date('h:i:s', time()) . (double)microtime() . "rn"); fclose($fp); } function b(){ $fp = fopen('result_b.log', 'w'); fputs($fp, 'Set in ' . Date('h:i:s', time()) . (double)microtime() . "rn"); fclose($fp); } if(!isset($_GET['act'])){ $_GET['act'] = 'a';}; if($_GET['act'] == 'a'){ runThread(); a(); }else if($_GET['act'] == 'b'){ b(); }; ?>
1. 尽量不访问同一个资源. 以避免冲突. 但是可以同时像数据库操作. 因为数据库是支持并发操作的. 所以在多线程的PHP中
不要向同一个文件中写入数据. 如果必须要写的话, 用别的方法进行同步.. 如调用 flock对文件进行加锁等. 或建立临时文件并在另外的线程中等待这个文件的消失 while(file_exits('xxx')); 这样就等于这个临时文件存在时, 表示其实线程正在操作,如果没有了这个文件, 说明其它线程已经释放了这个.
2. 尽量不要从runThread在执行fputs后取这个socket中读取数据. 因为要实现多线程, 需要的用非阻塞模式. 即在像fgets这样的函数时立即返回.. 所以读写数据就会出问题. 如果使用阻塞模式的话, 程序就不算是多线程了. 他要等上面的返回才执行下面的程序. 所以如果需要交换数据最后利用外面文件或数据中完成. 实在想要的话就用socket_set_nonblock($fp) 来实现.
说了这么多, 倒底这个有没有实际的意义呢? 在什么时候需要这种用这种方法呢 ?
答案是肯定的. 大家知道. 在一个不断读取网络资源的应用中, 网络的速度是瓶颈. 如果采多这种形式就可以同时以多个线程对不同的页面进行读取.
本人做的一个能从8848、soaso这些商城网站搜索信息的程序。还有一个从阿里巴巴网站上读取商业信息和公司目录的程序也用到了此技术。 因为这两个程序都是要不断的链接它们的服务器读取信息并保存到数据库。 利用此技术正好消除了在等待响应时的瓶颈。
多进程:使用PHP的Process Control Functions(PCNTL/线程控制函数)
只能用在Unix Like OS,Windows不可用。
编译php的时候,需要加上--enable-pcntl,且推荐仅仅在CLI模式运行,不要在WEB服务器环境运行。
以下为简短的测试代码:
代码如下:
declare(ticks=1); $bWaitFlag = FALSE; /// 是否等待进程结束 $intNum = 10; /// 进程总数 $pids = array(); /// 进程PID数组 echo ("Start\n"); for($i = 0; $i < $intNum; $i++) { $pids[$i] = pcntl_fork();/// 产生子进程,而且从当前行之下开试运行代码,而且不继承父进程的数据信息 if(!$pids[$i]) { // 子进程进程代码段_Start $str=""; sleep(5+$i); for ($j=0;$j<$i;$j++) {$str.="*";} echo "$i -> " . time() . " $str \n"; exit(); // 子进程进程代码段_End } } if ($bWaitFlag) { for($i = 0; $i < $intNum; $i++) { pcntl_waitpid($pids[$i], $status, WUNTRACED); echo "wait $i -> " . time() . "\n"; } } echo ("End\n");
[文章二] 尝试php命令行脚本多进程并发执行
除了fork, cli下的并发方式还有一种,看我的例子:
php不支持多线程,但是我们可以把问题转换成“多进程”来解决。由于php中的pcntl_fork只有unix平台才可以使用,所以本文尝试使用popen来替代。
下面是一个例子:
被并行调用的子程序代码:
代码如下:
<?php if($argc==1){ echo("argv\n"); } $arg = $argv[1]; for($i=0; $i<10; $i++) { echo($i.".1.".time()." exec $arg \n"); if($arg=='php2'){ sleep(1); echo($i.".2.".time()." exec $arg \n"); sleep(1); }else{ sleep(1); } } ?>
代码如下:
error_reporting(E_ALL); $handle1 = popen('php sub.php php1', 'r'); $handle2 = popen('php sub.php php2', 'r'); $handle3 = popen('php sub.php php3', 'r'); echo "'$handle1'; " . gettype($handle1) . "\n"; echo "'$handle2'; " . gettype($handle2) . "\n"; echo "'$handle3'; " . gettype($handle3) . "\n"; //sleep(20); while(!feof($handle1) || !feof($handle2) || !feof($handle3) ) { $read = fgets($handle1); echo $read; $read = fgets($handle2); echo $read; $read = fgets($handle3); echo $read; } pclose($handle1); pclose($handle2); pclose($handle3);
代码如下:
/* 主任务管理器 并发的执行子任务列表 */ include("../common/conf.php"); include("../common/function.php"); //开启的进程数 $exec_number = 40 ; /***** main ********/ if($argc==1){ echo("argv\n"); } $taskfile = $argv[1]; //tasklist $tasklist = file($taskfile); $tasklist_len = count($tasklist); $tasklist_pos = 0; $handle_list = array(); while(1) { //子进程列表有空闲,则填充补齐子进程列表 if($exec_number > count($handle_list) && $tasklist_pos < $tasklist_len) { for($i=$tasklist_pos; $i<$tasklist_len; ) { $command = $tasklist[$i] ; $handle_list[] = popen($command , "r" ); tolog("begin task \t ".$tasklist[$i]); $i++; if($exec_number == count($handle_list)) break; } $tasklist_pos = $i; } //如果子进程列表空,退出 if(0 == count($handle_list)) { break; } //检查子进程列表的输出,把停掉的子进程关闭并记录下来 $end_handle_keys = array(); foreach($handle_list as $key => $handle) { //$str = fgets($handle, 65536); $str = fread($handle, 65536); echo($str); if(feof($handle)) { $end_handle_keys[] = $key; pclose($handle); } } //踢出停掉的子进程 foreach($end_handle_keys as $key) { unset($handle_list[$key]); //var_dump($handle_list); //exit; } } tolog("\n\n*******************end**********************\n\n", "" , true);
代码如下:
do { if (($msgsock = socket_accept($sock)) < 0) { echo "socket_accept() failed: reason: " . socket_strerror($msgsock) . "\n"; break; } $pid = pcntl_fork(); if ($pid == -1) { die('could not fork'); } else if (!$pid) { ..... socket_write($msgsock, $msg, strlen($msg)); do { ...... } while (true); socket_close($msgsock); } } while (true);