如何在 Guzzle 中实现每 10 个 HTTP 请求间添加 1 秒延迟

雨瑶吖_3786

雨瑶吖_3786

2026-11-19

257人浏览

原创

如何在 Guzzle 中实现每 10 个 HTTP 请求间添加 1 秒延迟

本文介绍在使用 guzzle 发起批量 http 请求时,如何通过分组与延时策略避免对目标域名造成请求过载,从而防止被限流或封禁;重点讲解基于 promise 池的可控并发方案,并提供可直接落地的代码实现。

本文介绍在使用 guzzle 发起批量 http 请求时,如何通过分组与延时策略避免对目标域名造成请求过载,从而防止被限流或封禁;重点讲解基于 promise 池的可控并发方案,并提供可直接落地的代码实现。

Guzzle 本身不提供内置的“请求节流”或“批次延迟”功能,但其强大的异步能力(基于 ReactPHP 或 cURL 扩展)配合手动调度,完全可以实现精准的请求节奏控制。关键在于:不要一次性提交全部 Promise,而应按批次(如每 10 个)提交、等待完成、再休眠 1 秒,然后处理下一批。

以下是一个推荐的、兼容 Guzzle 7+ 的专业实现方案(使用 Pool + each_limit + 自定义中间件式延迟):

use GuzzleHttp\Promise\Pool;
use GuzzleHttp\Client;

// 预处理所有请求 URL
$urls = array_map(function($d) {
    if (is_string($d)) $d = json_decode($d, true);
    return sprintf('http://api.scrapestack.com/scrape?%s', $this->createScrapestackRequestData($d['link']));
}, $data);

// 分批:每 10 个 URL 为一组
$batchedUrls = array_chunk($urls, 10);
$responses = [];

foreach ($batchedUrls as $batchIndex => $batch) {
    // 构建本批次的 Promise 数组
    $promises = array_map(function($url) {
        return $this->client->getAsync($url);
    }, $batch);

    // 使用 Pool 并发执行本批次(例如最多并发 10)
    $pool = new Pool($this->client, $promises, [
        'concurrency' => 10,
        'fulfilled' => function ($response, $index) use (&$responses) {
            $responses[] = $response->getBody()->getContents();
        },
        'rejected' => function ($reason, $index) {
            // 可记录失败日志,不影响其他请求
            error_log("Request failed: " . $reason->getMessage());
        }
    ]);

    // 等待本批次全部完成
    $pool->promise()->wait();

    // 批次间延迟:除最后一组外,均暂停 1 秒
    if ($batchIndex <p>⚠️ 注意事项:</p>
  • 勿混用同步/异步客户端:原答案中切换为 Symfony HttpClient(CurlHttpClient)虽可行,但会丢失 Guzzle 的中间件、重试、日志等生态优势;建议全程使用 Guzzle 保持一致性。
  • sleep() vs usleep():sleep(1) 在 CLI 下安全,但在 Web SAPI(如 Apache/FPM)中可能阻塞整个进程;生产环境推荐 usleep(1_000_000) 或结合 Loop::delay()(若使用 ReactPHP)。
  • 域名级限速更优:若链接集中于少数域名,可进一步增强逻辑——先按 parse_url($url, PHP_URL_HOST) 分组,再对每个 host 单独限速(如每 host 每秒 ≤5 请求),这比固定 10 个/秒更健壮。
  • 异常容错:务必在 rejected 回调中处理异常,避免单个失败导致整批中断;必要时可加入指数退避重试。

总结:Guzzle 完全支持请求节流,核心是主动分批 + 显式等待 + 同步延迟。相比简单循环 sleep(),Pool 方案兼顾并发效率与服务友好性,是 API 调用场景下的最佳实践。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
php文件怎么打开
php文件怎么打开

打开php文件步骤:1、选择文本编辑器;2、在选择的文本编辑器中,创建一个新的文件,并将其保存为.php文件;3、在创建的PHP文件中,编写PHP代码;4、要在本地计算机上运行PHP文件,需要设置一个服务器环境;5、安装服务器环境后,需要将PHP文件放入服务器目录中;6、一旦将PHP文件放入服务器目录中,就可以通过浏览器来运行它。

2023.09.01

13184

6

php怎么取出数组的前几个元素
php怎么取出数组的前几个元素

取出php数组的前几个元素的方法有使用array_slice()函数、使用array_splice()函数、使用循环遍历、使用array_slice()函数和array_values()函数等。本专题为大家提供php数组相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.11

7541

5

php反序列化失败怎么办
php反序列化失败怎么办

php反序列化失败的解决办法检查序列化数据。检查类定义、检查错误日志、更新PHP版本和应用安全措施等。本专题为大家提供php反序列化相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.11

2275

5

php怎么连接mssql数据库
php怎么连接mssql数据库

连接方法:1、通过mssql_系列函数;2、通过sqlsrv_系列函数;3、通过odbc方式连接;4、通过PDO方式;5、通过COM方式连接。想了解php怎么连接mssql数据库的详细内容,可以访问下面的文章。

2023.10.23

4768

4

php连接mssql数据库的方法
php连接mssql数据库的方法

php连接mssql数据库的方法有使用PHP的MSSQL扩展、使用PDO等。想了解更多php连接mssql数据库相关内容,可以阅读本专题下面的文章。

2023.10.23

5474

6

html怎么上传
html怎么上传

html通过使用HTML表单、JavaScript和PHP上传。更多关于html的问题详细请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.03

4311

9

PHP出现乱码怎么解决
PHP出现乱码怎么解决

PHP出现乱码可以通过修改PHP文件头部的字符编码设置、检查PHP文件的编码格式、检查数据库连接设置和检查HTML页面的字符编码设置来解决。更多关于php乱码的问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.09

6277

8

php文件怎么在手机上打开
php文件怎么在手机上打开

php文件在手机上打开需要在手机上搭建一个能够运行php的服务器环境,并将php文件上传到服务器上。再在手机上的浏览器中输入服务器的IP地址或域名,加上php文件的路径,即可打开php文件并查看其内容。更多关于php相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.13

4922

8

sprintf函数用法详解
sprintf函数用法详解

sprintf函数的用法:1、格式化字符串;2、指定输出宽度和精度;3、返回值。更多关于sprintf函数用法详解的内容,大家可以阅读下面的文章。

2023.11.27

12602

4

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.3万人学习