hyperf使用curl产生的超时问题

业务场景

每天晚上系统需要同步第三方接口的数据，我们的系统要做的就是使用多个协程调用api接口获取数据（一批单号需要调用多个不同的接口），然后写入数据库。

出现的问题

在设置了超时时间为5分钟的情况下，大部分接口请求能正常响应，少量接口请求会超时。

问题定位

1.怀疑接口响应慢

使用jmeter以及golang分别测试，都不存在超时情况。golang设置的协程数量甚至比本场景中的大。

2.怀疑协程相关部分使用有问题，造成某些协程无法被唤醒

程序中用了channel和wait group。channel用于控制同时请求的api数量，wait group用于等待一批单号的所有接口请求完成。于是改成同步代码，并删除所有的数据库相关代码和所有的channel和wait group，结果依然会超时。

3.怀疑curl库在hyperf中有问题

查看文档，hyperf文档说swoole v4.5.4之前的版本需要添加

! defined(<

hyperf使用curl产生的超时问题相关推荐

curl命令的超时时间
转载自:http://blog.chinaunix.net/uid-20788470-id-1841681.html 今天在一台服务器上突然看到一个curl进程已经运行了28天还木结束, 有点奇怪! ...
php 设置curl不超时时间,curl命令的超时时间
今天在一台服务器上突然看到一个curl进程已经运行了28天还木结束, 有点奇怪! 我在使用curl的时候也设置了超时时间, --connect-timeout 5 curl --connect-tim ...
Linux下CURL设置请求超时时间
使用CURL时,有两个超时时间:一个是连接超时时间,另一个是数据传输的最大允许时间. 连接超时时间用--connect-timeout参数来指定,数据传输的最大允许时间用-m参数来指定. 例如: cu ...
使用 curl 下载需要太长时间？试试在 cURL 中设置超时
cURL是一个出色的网络通信工具,它代表"客户端 URL".几乎所有设备都使用地球上连接到 Internet 的 cURL,cURL 最广泛的用途是从终端中的远程服务器下载文件. ...
php curl 超时毫秒,php使用curl模拟异步请求，毫秒级超时设置
使用curl请求设置超时模拟php异步请求: /** * 1.curl 异步请求不需要等待返回值(秒级) * * @param [type] $url [description] * @return ...
linux curl 使用详解常见应用
curl 1 http 超时 -m 指定超时的时间等于--connect-timeout 2 输出到空 -o /dev/null 不输出,正常是输出html格式 3 -w 指定格式输出 4 -s 去 ...
PHP的CURL报错的排查记录：短连接的成本真的很高啊
2019独角兽企业重金招聘Python工程师标准>>> 最近在优化接口的时候发现,php的curl调用远程接口的时候出现了大量的这种错误 * Resolving timed out ...
应对恶劣网络环境，为php-curl设置超时限制，防止服务器卡死
挖洋货这项目,因为没有公司的名头,也就无法备案,所以前端机放在阿里云香港ECS,另配一台阿里云杭州ECS来跑crontab--执行爬虫.保存图片到阿里云OSS等.最近觉得杭州ECS有点多余了(原本还有 ...
curl 怎么在xp下使用_Http Post 快速使用
点击上方蓝字可直接关注!方便下次阅读.如果对你有帮助,麻烦点个在看或点个赞,感谢~ 一直对http很陌生,这次借助libcurl分享一个快速使用http post的案例. 平台:ubuntu16.04 ...