当前位置:首页 > PHP教程 > php高级应用 > 列表

详解PHP中curl_multi并发的实现

发布:smiling 来源: PHP粉丝网  添加日期:2022-03-13 11:18:55 浏览: 评论:0 

PHP中的curl_multi系列函数可以实现同时请求多个URL来实现并发,而不是像普通curl函数那样请求后会阻塞,直到结果返回才进行下一个请求,因此在批量请求URL时可通过curl_multi系列函数提升程序的运行效率。

curl普通请求

  1. $startTime = microtime(true); 
  2. $chArr = []; 
  3. $optArr = [ 
  4.   CURLOPT_URL => 'http://www.httpbin.org/ip'
  5.   CURLOPT_HEADER => 0, 
  6.   CURLOPT_RETURNTRANSFER => 1, 
  7. ]; 
  8. $result = []; 
  9.  
  10. //创建多个curl资源并执行 
  11. for ($i=0; $i<10; $i++) { 
  12.   $chArr[$i] = curl_init(); 
  13.   curl_setopt_array($chArr[$i], $optArr); 
  14.   $result[$i] = curl_exec($chArr[$i]); 
  15.   curl_close($chArr[$i]); 
  16.  
  17. $endTime = microtime(true); 
  18. echo sprintf("use time: %.3f s".PHP_EOL, $endTime - $startTime); 
  19. use time: 6.080 s 

curl_multi并发请求

  1. $startTime = microtime(true); 
  2. $chArr = []; 
  3. $optArr = [ 
  4.   CURLOPT_URL => 'http://www.httpbin.org/ip'
  5.   CURLOPT_HEADER => 0, 
  6.   CURLOPT_RETURNTRANSFER => 1, 
  7. ]; 
  8. $result = []; 
  9.  
  10. //创建多个curl资源 
  11. for ($i=0; $i<10; $i++) { 
  12.   $chArr[$i] = curl_init(); 
  13.   curl_setopt_array($chArr[$i], $optArr); 
  14. //创建批处理curl句柄 
  15. $mh = curl_multi_init(); 
  16. //将单个curl句柄添加到批处理curl句柄中 
  17. foreach ($chArr as $ch) { 
  18.   curl_multi_add_handle($mh$ch); 
  19. //判断操作是否仍在执行的标识的引用 
  20. $active = null; 
  21. /** 
  22.  * 本次循环第一次处理 $mh 批处理中的 $ch 句柄,并将 $mh 批处理的执行状态写入 $active, 
  23.  * 当状态值等于 CURLM_CALL_MULTI_PERFORM 时,表明数据还在写入或读取中,执行循环, 
  24.  * 当第一次 $ch 句柄的数据写入或读取成功后,状态值变为 CURLM_OK ,跳出本次循环,进入下面的大循环中。 
  25.  */ 
  26. do { 
  27.   //处理在批处理栈中的每一个句柄 
  28.   $mrc = curl_multi_exec($mh$active); 
  29. while ($mrc == CURLM_CALL_MULTI_PERFORM); 
  30. /** 
  31.  * 上面这段代码中,是可以直接使用 $active > 0 来作为 while 的条件,如下: 
  32.  * do { 
  33.  *  $mrc = curl_multi_exec($mh, $active); 
  34.  * } while ($active > 0); 
  35.  * 此时如果整个批处理句柄没有全部执行完毕时,系统会不停的执行 curl_multi_exec 函数,从而导致系统CPU占用会很高, 
  36.  * 因此一般不采用这种方案,可以通过 curl_multi_select 函数来达到没有需要读取的程序就阻塞住的目的。 
  37.  */ 
  38.  
  39. /** 
  40.  * $active 为 true 时,即 $mh 批处理之中还有 $ch 句柄等待处理, 
  41.  * $mrc == CURLM_OK,即上一次 $ch 句柄的读取或写入已经执行完毕。 
  42.  */ 
  43. while ($active && $mrc == CURLM_OK) { 
  44.   /**  
  45.    * 程序进入阻塞状态,直到批处理中有活动连接(即 $mh 批处理中还有可执行的 $ch 句柄), 
  46.    * 这样执行的好处是 $mh 批处理中的 $ch 句柄会在读取或写入数据结束后($mrc == CURLM_OK)进入阻塞阶段, 
  47.    * 而不会在整个 $mh 批处理执行时不停地执行 curl_multi_exec 函数,白白浪费CPU资源。 
  48.    */ 
  49.    if (curl_multi_select($mh) != -1) { 
  50.     //程序退出阻塞状态继续执行需要处理的 $ch 句柄 
  51.     do { 
  52.       $mrc = curl_multi_exec($mh$active); 
  53.     } while ($mrc == CURLM_CALL_MULTI_PERFORM); 
  54.   } 
  55.  
  56. foreach ($chArr as $i=>$ch) { 
  57.   //获取某个curl句柄的返回值 
  58.   $result[$i] = curl_multi_getcontent($ch); 
  59.   //移除批处理句柄中的某个句柄资源 
  60.   curl_multi_remove_handle($mh$ch); 
  61. //关闭一组curl句柄 
  62. curl_multi_close($mh); 
  63. $endTime = microtime(true); 
  64. echo sprintf("use time: %.3f s".PHP_EOL, $endTime - $startTime); 
  65. use time: 0.599 s 

通过对比上述程序的运行时间可以得知,使用curl_multi系列函数并发请求要比普通的curl函数依次请求效率高很多。

Tags: curl_multi PHP并发

分享到: