php 利用curl_*测试数据并发

迷南。 2021-11-22 19:48 353阅读 0赞

工作时遇到一个数据并发问题，因为上线之前没有测试数据并发，导致有时候网络比较差的时候导致数据重复插入数据库 ， 所以利用curl\_\*函数专门写了一个测试数据并发的测试用例，如下：

function test(string $url){
    
            $arr_ch = array();
            // 创建cURL批处理句柄
            $mh = curl_multi_init();
            $index = 0;
            while($index < 20){
                
                $ch = curl_init();
                $arr_ch[$index]  = $ch;
    　　　　　　　//设置url
                curl_setopt($arr_ch[$index], CURLOPT_URL, $url)；
                curl_setopt($arr_ch[$index], CURLOPT_HEADER, 0);
    　　　　　　　//设置登陆需要的sessionid 
                curl_setopt($arr_ch[$index] , CURLOPT_COOKIE , "PHPSESSID=vj8qsrag5g6d2dh2t23nv03f11; qlpagecookieid=2dd06ed033d929e8cb4287c622e98275");
                curl_multi_add_handle($mh , $arr_ch[$index]);
                $index++;
                
            }
    
            // 预定义一个状态变量
            $active = null;
    
            // 执行批处理
            do {
                $mrc = curl_multi_exec($mh, $active);
            } while ($mrc == CURLM_CALL_MULTI_PERFORM);
    
            while ($active && $mrc == CURLM_OK) {
                if (curl_multi_select($mh) != -1) {
                    do {
                        $mrc = curl_multi_exec($mh, $active);
                    } while ($mrc == CURLM_CALL_MULTI_PERFORM);
                }
            }
    
            // 关闭各个句柄
            foreach($arr_ch as $ch){
                curl_multi_remove_handle($mh, $ch);
            }
            curl_multi_close($mh);
        }

转载于:https://www.cnblogs.com/Acsii/p/11009296.html

发表评论取消回复

表情：

评论列表（有 0 条评论，353人围观）

还没有评论，来说两句吧...

相关阅读

相关 PHP 利用 curl 实现多进程下载文件类

阅读目录场景示例场景批量下载文件一般使用循环的方式，逐一执行下载。但在带宽与服务器性能允许的情况下，使用多进程进行下载可以大大提高下载的效

Bertha 。/ 2023年10月06日 23:17/ 0 赞/ 33 阅读

相关 php curl数据传输神器

php curl数据传输神器一、curl的概念：二、curl的使用场景三、在PHP中使用cUrl 四、使用示例 1、一个最简单的

左手的ㄟ右手/ 2023年10月06日 18:55/ 0 赞/ 41 阅读

相关 php的curl中gzip压缩,php curl 中的gzip压缩性能测试_php

前因： 1 请求接口次数很多，每日两亿多次，主要是有些接口返回数据量很大高达110KB(为了减少请求次数，将多个接口合并成一个导致的)。后端接口的nginx已经开启g

柔光的暖阳◎/ 2023年01月16日 09:42/ 0 赞/ 146 阅读

相关 php curl 错误码,PHP cURL错误58

需要一些帮助来理解无处不在的cURL 58错误，这是由于在这种情况下，包括带有cURL请求的PEM文件。 Error 58: unable to set private ke

分手后的思念是犯贱/ 2022年11月18日 04:58/ 0 赞/ 319 阅读

相关 PHP CURL 同步/异步并发采集爬行

在上一篇文章基础上对代码进行了整理,并合并进同步采集的方法类中用到了另一个 Proxy代理类,请自行实现, 如果不需要使用代理,请去除相关代码同步调用示意

川长思鸟来/ 2022年08月26日 01:20/ 0 赞/ 37 阅读

相关 PHP CURL 并发采集

2014年的第一缕阳光终于在2月27日早上照在了北京的街道上, 心情豁然开朗, 写个博客以记录此重大事件. 说并发之前,先说防封锁吧. 近期工作中需要

- 日理万妓/ 2022年08月25日 09:13/ 0 赞/ 176 阅读

相关 curl 并发

function _curl($connomains){ $returnData=array(); $mh = curl_multi_i

红太狼/ 2022年08月22日 14:14/ 0 赞/ 185 阅读

相关 PHP curl发送数据函数

在项目中经常会调用一些网络接口，返回的数据一般为json 或者 xml 为主，这个函数就是利用 curl 发送网络请求获得数据，可以根据实际情况改编。 // 注意cook

你的名字/ 2022年08月09日 06:52/ 0 赞/ 216 阅读

相关 php curl使用post发送数据

<?php function post($url, $data) { //初使化init方法 $ch = curl_init(); //指定URL curl_setop

我就是我/ 2022年05月17日 10:28/ 0 赞/ 258 阅读

相关 php 利用curl_*测试数据并发

工作时遇到一个数据并发问题，因为上线之前没有测试数据并发，导致有时候网络比较差的时候导致数据重复插入数据库，所以利用curl\_\函数专门写了一个测试数据并发的测试用例，如

迷南。/ 2021年11月22日 19:48/ 0 赞/ 354 阅读