首页 > 后端开发 > php教程 > 如何在 PHP 中执行并行 cURL 请求以高效地从多个 URL 检索数据?

如何在 PHP 中执行并行 cURL 请求以高效地从多个 URL 检索数据?

Linda Hamilton
发布: 2024-11-16 22:41:03
原创
583 人浏览过

How Can I Execute Parallel cURL Requests to Retrieve Data from Multiple URLs Efficiently in PHP?

PHP:如何执行并行 cURL 请求

当处理需要高效地从多个 URL 检索数据的情况时,并行 cURL 请求成为必需品。在这种情况下,让我们考虑一下您的场景,您希望使用 file_get_contents($url) 从 15 个不同的 URL 检索 JSON 数据。

您当前使用简单循环发出顺序请求的方法可能会导致速度显着减慢,因为file_get_contents 的同步性质。这意味着脚本必须等待每个请求完成才能继续处理下一个请求。

为了克服这个问题,我们可以利用多 cURL 请求。以下是完成此操作的方法:

$nodes = array($url1, $url2, $url3);
$node_count = count($nodes);

$curl_arr = array();
$master = curl_multi_init();

for ($i = 0; $i < $node_count; $i++) {
    $url = $nodes[$i];
    $curl_arr[$i] = curl_init($url);
    curl_setopt($curl_arr[$i], CURLOPT_RETURNTRANSFER, true);
    curl_multi_add_handle($master, $curl_arr[$i]);
}

do {
    curl_multi_exec($master, $running);
} while ($running > 0);

for ($i = 0; $i < $node_count; $i++) {
    $results[] = curl_multi_getcontent($curl_arr[$i]);
}

print_r($results);
登录后复制

此脚本创建一个多卷曲上下文,并将每个 URL 作为单独的简单句柄添加到其中。然后,它使用循环迭代所有简单句柄,同时执行它们并收集结果。最后,它会打印从所有 URL 检索到的内容。

通过使用并行 cURL 请求,您可以显着提高脚本的性能并减少从多个 URL 检索数据所需的时间。

以上是如何在 PHP 中执行并行 cURL 请求以高效地从多个 URL 检索数据?的详细内容。更多信息请关注PHP中文网其他相关文章!

来源:php.cn
本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
作者最新文章
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板