找回密码
 加入怎通
查看: 287|回复: 9

生产环境url告警检测--通过curl来获取http各阶段时间(生产环境中的有害因素主要包括)

[复制链接]
我来看看 发表于 2023-03-20 20:26:22 | 显示全部楼层 |阅读模式
& m4 S3 n7 z- X' q

概述最近系统总是url告警,有点烦,所以想要通过curl来获取http各阶段时间,定位下问题的原因,看能不能获取一些有效信息,下面介绍下curl的参数和常用的一些用法curl的部分参数解释:http_code http状态码,如200成功,301转向,404未找到,500服务器错误等。

- I: v8 I# ]2 `. x+ Q+ i! V8 k

% ~1 ]$ ?7 z `) g- T time_total 总时间,按秒计精确到小数点后三位 6 A: f0 f; Q9 i5 P- t7 B$ b time_namelookup DNS解析时间,从请求开始到DNS解析完毕所用时间, B) ^9 Q. x* m v y* X% r time_connect 连接时间,从开始到建立TCP连接完成所用时间,包括前边DNS解析时间,如果需要单纯的得到连接时间,用这个time_connect时间减去前边time_namelookup时间。

) t$ Y( c. P6 A0 U& h6 N

" J7 O. U' S; s) h3 L; \1 ?+ ]1 K time_appconnect 连接建立完成时间,如SSL/SSH等建立连接或者完成三次握手时间 ' \) b5 @* K' _6 p time_pretransfer 从开始到准备传输的时间 ' E. F- f. ^: f0 k2 n time_redirect 重定向时间,包括到最后一次传输前的几次重定向的DNS解析,连接,预传输,传输时间。

?' R* T6 Q' n# p$ a$ M& ^! B5 j; x

- n9 ~& Q7 q2 e9 V: O time_starttransfer 开始传输时间在client发出请求之后,Web 服务器返回数据的第一个字节所用的时间 3 A' U% |/ R% n: [! e; a: d% Z size_download 下载大小 # a; x+ t5 i6 }1 X: Y2 D, G1 {) W0 t size_upload 上传大小1 Y2 b6 \9 q+ }! z( y9 x size_header 下载的header的大小 0 [! i4 n& X) @& t2 h size_request 请求的大小。

( Y) P B/ B- X; y& G8 C3 o

4 r; s2 X( K0 z3 X( O speed_download 下载速度,单位-字节每秒6 a# ?; Q/ s/ f/ d3 ]2 r: M speed_upload 上传速度,单位-字节每秒 1 r4 T, `8 f/ b. z7 _6 l1 O9 C9 F5 \ content_type 就是content-Type,不用多说了,这是一个访问我博客首页返回的结果示例(text/html; charset=UTF-8);9 j+ K8 E! m; m% x! V6 f ssl_verify_result ssl认证结果,返回0表示认证成功。

, \: b" n& A9 K, O* B' h8 C

0 ]% R% r* o2 P* O4 S4 f 1、直接访问使用#curl -o /dev/null -s -w %{http_code}:%{http_connect}:%{content_type}:%{time_namelookup}:%{time_redirect}:%{time_pretransfer}:%{time_connect}:%{time_starttransfer}:%{time_total}:%{speed_download} www.baidu.com - ^: U6 X3 @9 S3 K

* ?+ t. C' C* t7 I

输出变量需要按照%{variable_name}的格式,如果需要输出%,double一下即可,即%%,同时,\n是换行,\r是回车,\t是TAB-w 指定格式化文件-o 请求重定向到,不带此参数则控制台输出返回结果。

8 M8 u( y* A4 L, Q/ G

-s 静默,不显示进度2、定义时间格式化文件访问#vim curl-time.txt 5 ]/ n9 M( X& }& B \n$ ~" e8 | ^7 G$ R http: %{http_code}\n& b- f, I& b$ @ dns: %{time_namelookup}s\n : k4 N5 s! ]' C* E redirect: %{time_redirect}s\n% ?7 V2 K" a8 M% V' ~' g time_connect: %{time_connect}s\n# f6 }3 K$ m4 M% i ~ time_appconnect: %{time_appconnect}s\n * e" v+ W: f$ ? time_pretransfer: %{time_pretransfer}s\n* A' m1 B' X" S time_starttransfer: %{time_starttransfer}s\n 6 _7 N+ U3 g `: _+ Y3 ]/ o& P) ^ size_download: %{size_download}bytes\n8 w2 u" d8 h* u3 K2 z speed_download: %{speed_download}B/s\n f7 z5 u1 D9 \ ----------\n0 s7 S- T% X, o+ W time_total: %{time_total}s\n 0 \& d3 O, f' C, c. n0 j b \n4 l3 A3 k- J5 B& m

; U' t E6 t% s1 Q5 b

执行命令:#curl -w "@curl_time.txt" -s -H "Content-Type: application/json" --insecure --header Host: passport.500.com --data {"platform":"android","userimei":"F5D815EA2BD8DBARD","app_channel":"10000","mbimei":"9DB358AF","version":"3.1.4","username":"hqzx","userpass":"976af4"} --compressed https://119.147.113.177/user/login$ M0 P/ \9 W; j$ N* d" @: Z4 y4 @8 x3 U

* J0 O6 X; G* \5 i& G1 G7 I

3、curl以post请求方法3.1、以json格式数据 #curl -H "Content-Type: application/json" -X POST --data {"data":"1"} http://127.0.0.1/ * i3 D* U9 {4 s. G/ w7 n, }

& n5 _9 H, _. X+ A

3.2、以&连接参数数据#curl -d "data=7778a8143f111272&score=19&app_key=8d49f16fe034b98b&_test_user=test01" "http://127.0.0.1"# t3 A1 L. I+ _4 T$ X; T

8 P; X) d/ N3 O) w' A: _

3.3、 附带文本数据,比如通过"浏览"选择本地的card.txt并上传发送post请求,其中-F 为带文件的形式发送post请求,blob为文本框中的name元素对应的属性值 + m8 i8 p( g# S( A; y6 h2 T" _, W, R) C7 }3 ?5 B5 C #curl -F "blob=@card.txt;type=text/plain" "http://172.16.102.208:8089/wiapi/score?leaderboard_id=7778a8143f111272&score=40&app_key=8d49f16fe034b98b&_test_user=test01" ' p: v! J9 C( V' K" R

% a! ^4 f" y; M$ G7 ^3 j% O* r

4、curl调试时常用命令:curl -o /home/1.txt -s -w %{time_connect}:%{time_starttransfer}:%{time_total}\n http://10.92.xx.xx/nwpp/) x) u( P- `1 @3 W

! q' y2 T% X) t# i* |6 W

这里可以看到有6次异常,4次正常,证明url访问不是很稳定。后面可以考虑让开发写个jar包去检测每个节点的访问情况。

7 Z2 q& `* N) f, e2 T8 M

大家如果碰到url告警方面的问题可以考虑自己写一些命令参数,然后去请求特定url来判断问题,整体逻辑都差不多。后面会分享更多关于平时工作中碰到问题的一些解决办法,感兴趣的朋友可以关注下!

8 W4 Y" e9 G$ `1 n, I5 u. E8 ^ / U; g8 k: f8 l \; _# E! m# u2 g9 c3 x- Y7 A, h4 E# m- y ; c( v- H5 n* r+ o4 k! S6 L- n7 B+ k ( q. `; p% n3 o' j& J7 U# E5 a1 a

暂时无法加载帖子列表

回复

使用道具 举报

店小二 发表于 2026-06-03 16:38:44 | 显示全部楼层
完全赞同,我也是这么认为的,英雄所见略同~
回复

使用道具 举报

百香果马兰 发表于 2026-08-25 21:30:42 | 显示全部楼层
刚好遇到类似问题,看完这个帖子心里有底了
回复

使用道具 举报

13012541100 发表于 2026-08-28 01:40:36 | 显示全部楼层
学习到了,之前一直没注意过这个点,受教了
回复

使用道具 举报

安静的小猫 发表于 2026-08-30 06:35:30 | 显示全部楼层
说得很实在,没有夸大其词,这种真实分享太难得了
回复

使用道具 举报

阳光会有的 发表于 2026-08-30 08:46:43 | 显示全部楼层
这个分享太实用了,刚好能用到,感谢楼主!
回复

使用道具 举报

cardlanwen 发表于 2026-08-30 11:04:35 | 显示全部楼层
蹲了这么久,终于看到有价值的讨论,支持一下!
回复

使用道具 举报

yichen 发表于 2026-08-31 07:08:40 | 显示全部楼层
楼主太厉害了,整理得这么详细,必须支持
回复

使用道具 举报

_り隐╄_迹ヤ 发表于 2026-08-31 08:49:52 | 显示全部楼层
分析得很透彻,很多细节都说到点子上了~
回复

使用道具 举报

104团队 发表于 2026-09-09 19:24:28 | 显示全部楼层
内容很干货,没有多余的废话,值得反复看
回复

使用道具 举报

    您需要登录后才可以回帖 登录 | 加入怎通

    本版积分规则

    QQ|手机版|小黑屋|网站地图|真牛社区 ( 苏ICP备2023040716号-2 )

    GMT+8, 2026-9-11 22:41 , Processed in 0.062681 second(s), 24 queries , Gzip On.

    免责声明:本站信息来自互联网,本站不对其内容真实性负责,如有侵权等情况请联系420897364#qq.com(把#换成@)删除。

    Powered by Discuz! X3.5

    快速回复 返回顶部 返回列表