一区二区三区在线-一区二区三区亚洲视频-一区二区三区亚洲-一区二区三区午夜-一区二区三区四区在线视频-一区二区三区四区在线免费观看

服務器之家:專注于服務器技術及軟件下載分享
分類導航

PHP教程|ASP.NET教程|Java教程|ASP教程|編程技術|正則表達式|C/C++|IOS|C#|Swift|Android|VB|R語言|JavaScript|易語言|vb.net|

服務器之家 - 編程語言 - PHP教程 - 利用curl 多線程 模擬 并發的詳解

利用curl 多線程 模擬 并發的詳解

2020-04-14 13:29PHP教程網 PHP教程

本篇文章是對利用curl多線程模擬并發進行了詳細的分析介紹,需要的朋友參考下

首先,先了解下 php中的curl多線程函數:

復制代碼 代碼如下:

# curl_multi_add_handle
# curl_multi_close
# curl_multi_exec
# curl_multi_getcontent
# curl_multi_info_read
# curl_multi_init
# curl_multi_remove_handle
# curl_multi_select


一般來說,想到要用這些函數時,目的顯然應該是要同時請求多個url,而不是一個一個依次請求,否則不如自己循環去調curl_exec好了。
步驟總結如下:
第一步:調用curl_multi_init
第二步:循環調用curl_multi_add_handle
這一步需要注意的是,curl_multi_add_handle的第二個參數是由curl_init而來的子handle。
第三步:持續調用curl_multi_exec
第四步:根據需要循環調用curl_multi_getcontent獲取結果
第五步:調用curl_multi_remove_handle,并為每個字handle調用curl_close
第六步:調用curl_multi_close

這里有一個網上找的簡單例子,其作者稱為dirty的例子,(稍后我會說明為何dirty):

復制代碼 代碼如下:

/*
Here's a quick and dirty example for curl-multi from PHP, tested on PHP 5.0.0RC1 CLI / FreeBSD 5.2.1
*/
$connomains = array(
"http://www.cnn.com/",
"http://www.canada.com/",
"http://www.yahoo.com/"
);
$mh = curl_multi_init();
foreach ($connomains as $i => $url) {
     $conn[$i]=curl_init($url);
      curl_setopt($conn[$i],CURLOPT_RETURNTRANSFER,1);
      curl_multi_add_handle ($mh,$conn[$i]);
}
do { $n=curl_multi_exec($mh,$active); } while ($active);
foreach ($connomains as $i => $url) {
      $res[$i]=curl_multi_getcontent($conn[$i]);
      curl_close($conn[$i]);
}
print_r($res);


整個使用過程差不多就是這樣,但是,這個簡單代碼有個致命弱點,就是在do循環的那段,在整個url請求期間是個死循環,它會輕易導致CPU占用100%。

現在我們來改進它,這里要用到一個幾乎沒有任何文檔的函數curl_multi_select了,雖然C的curl庫對select有說明,但是,php里的接口和用法確與C中有不同。
把上面do的那段改成下面這樣:

復制代碼 代碼如下:

do {
                        $mrc = curl_multi_exec($mh,$active);
                } while ($mrc == CURLM_CALL_MULTI_PERFORM);
                while ($active and $mrc == CURLM_OK) {
                        if (curl_multi_select($mh) != -1) {
                                do {
                                        $mrc = curl_multi_exec($mh, $active);
                                } while ($mrc == CURLM_CALL_MULTI_PERFORM);
                        }
                }


因為$active要等全部url數據接受完畢才變成false,所以這里用到了curl_multi_exec的返回值判斷是否還有數據,當有數據的時候就不停調用curl_multi_exec,暫時沒有數據就進入select階段,新數據一來就可以被喚醒繼續執行。這里的好處就是CPU的無謂消耗沒有了。

另外:還有一些細節的地方可能有時候要遇到:
控制每一個請求的超時時間,在curl_multi_add_handle之前通過curl_setopt去做:
curl_setopt($ch, CURLOPT_TIMEOUT, $timeout);
判斷是否超時了或者其他錯誤,在curl_multi_getcontent之前用:curl_error($conn[$i]);

這里我只是簡單使用上述的dirty的例子(足夠用了,并未發現cpu使用100%的情況)。
對“看點”(kandian.com)某一接口模擬并發,功能是向 memcache中讀數據并寫入數據。因為保密關系,相關數據及結果就不貼出了。

模擬了3次,第一次10線程同時請求1000次,第二次,100線程同時請求1000次,第三次,1000線程同時請求100次(已經相當費勁了,不敢在設置超過1000的多線程)。
看來curl多線程模擬并發還是有一定局限的。

另外還懷疑,可能會因為多線程延遲帶來結果的大誤差,對比數據發現。在初始化和set所用時間出入不大,差別處在get方法,因此可簡單排除這點~~~

 

 

延伸 · 閱讀

精彩推薦
主站蜘蛛池模板: 天天爱天天操天天射 | 91在线精品老司机免费播放 | 精品久久久久久亚洲 | 亚洲码和乱人伦中文一区 | 91成人爽a毛片一区二区 | 我将她侵犯1~6樱花动漫在线看 | 四虎成人影院网址 | 国内精品久久久久久久久 | 日本人交换乱理伦片 | 风间由美在线播放 | gav男人天堂 | 亚洲精品国产一区二区第一页 | 午夜精品国产自在现线拍 | 91国内精品久久久久影院优播 | 极品 女神校花 露脸91 | 亚洲香蕉伊在人在线观婷婷 | 免费看一级a一片毛片 | 亚洲高清国产品国语在线观看 | 亚洲同性男男gay1069 | 欧美在线成人免费国产 | 999久久久免费精品国产牛牛 | 肥胖女人一级毛片 | 扒开尿口| 国产全部理论片线观看 | 91av导航| 亚洲午夜精品久久久久久成年 | tobu8在线观看免费高清 | 青草视频在线观看免费资源 | 亚洲天堂日韩在线 | 激情综合色啪啪小说 | ai换脸杨颖被啪在线观看 | 第一次出血videos | 亚洲一级特黄 | 男女性刺激爽爽免费视频 | 青青青青青国产免费手机看视频 | 99热这里只精品99re66 | 国产日本久久久久久久久婷婷 | aaa级黄色片 | 国产成人一区二区三区影院免费 | 国产成人99久久亚洲综合精品 | 羞羞漫画免费漫画页面在线看漫画秋蝉 |