找回密码
 加入怎通
查看: 288|回复: 9

生产环境url告警检测--通过curl来获取http各阶段时间(生产环境中的有害因素主要包括)

[复制链接]
我来看看 发表于 2023-03-20 20:26:22 | 显示全部楼层 |阅读模式
% B0 v/ @# ^8 j1 ~6 R

概述最近系统总是url告警,有点烦,所以想要通过curl来获取http各阶段时间,定位下问题的原因,看能不能获取一些有效信息,下面介绍下curl的参数和常用的一些用法curl的部分参数解释:http_code http状态码,如200成功,301转向,404未找到,500服务器错误等。

9 p" P+ ^) w# n a' {9 J, M

3 m. ]7 w3 E% @ time_total 总时间,按秒计精确到小数点后三位7 F# ^) ^3 I2 W4 D time_namelookup DNS解析时间,从请求开始到DNS解析完毕所用时间1 E/ g8 v, h: l. D time_connect 连接时间,从开始到建立TCP连接完成所用时间,包括前边DNS解析时间,如果需要单纯的得到连接时间,用这个time_connect时间减去前边time_namelookup时间。

7 z& m: M# }! B1 ?

$ v: @ D/ x& X5 _' l time_appconnect 连接建立完成时间,如SSL/SSH等建立连接或者完成三次握手时间/ v1 k% N4 g4 F' G/ D& C4 P time_pretransfer 从开始到准备传输的时间 8 i+ u; C P7 d4 W, \ \ time_redirect 重定向时间,包括到最后一次传输前的几次重定向的DNS解析,连接,预传输,传输时间。

% E7 x8 ~; d, M/ U0 V5 J- R( a, u% s

/ H* c# G N* b time_starttransfer 开始传输时间在client发出请求之后,Web 服务器返回数据的第一个字节所用的时间0 P6 Y8 x, u# F( ^' ] size_download 下载大小+ t/ h! K& g: b! z' e size_upload 上传大小 # s" O7 y. a0 b% n2 ]) [2 k x* X" E size_header 下载的header的大小 $ X& P2 m, E- n5 E size_request 请求的大小。

1 q% j3 G" u6 ^6 q( R# P" ~* J0 g

, J& v& p- H5 q# w* T speed_download 下载速度,单位-字节每秒 3 R& x; a! r6 @; g% H6 w speed_upload 上传速度,单位-字节每秒$ N2 Q3 t+ X8 q4 o# y8 Q content_type 就是content-Type,不用多说了,这是一个访问我博客首页返回的结果示例(text/html; charset=UTF-8);0 O5 a5 a6 W& k" v3 x7 R ssl_verify_result ssl认证结果,返回0表示认证成功。

7 O& x0 \$ w2 I

8 Z& \# `9 H8 I 1、直接访问使用#curl -o /dev/null -s -w %{http_code}:%{http_connect}:%{content_type}:%{time_namelookup}:%{time_redirect}:%{time_pretransfer}:%{time_connect}:%{time_starttransfer}:%{time_total}:%{speed_download} www.baidu.com) s, O0 p& T% |- w h# w

$ d! e* m. Y! d5 D1 l

输出变量需要按照%{variable_name}的格式,如果需要输出%,double一下即可,即%%,同时,\n是换行,\r是回车,\t是TAB-w 指定格式化文件-o 请求重定向到,不带此参数则控制台输出返回结果。

7 _% M3 I2 a4 C

-s 静默,不显示进度2、定义时间格式化文件访问#vim curl-time.txt1 t% \6 l2 \, ^! T' j3 m \n4 \1 ?- O9 C b. {1 v! A* D http: %{http_code}\n7 k2 S( V* J2 x1 r5 g2 A1 a dns: %{time_namelookup}s\n 0 P: A5 A5 ~" _7 g9 `! R redirect: %{time_redirect}s\n & E) R) n" T. P. ^* b( S# G- |8 o" B2 d time_connect: %{time_connect}s\n ; {1 S8 i, z9 ~ time_appconnect: %{time_appconnect}s\n- ?: |! ^- ?/ W: {! v: j0 N# K time_pretransfer: %{time_pretransfer}s\n . ]3 Y0 F# w$ K3 ?3 P# u time_starttransfer: %{time_starttransfer}s\n/ F# k6 Q% p, o) B size_download: %{size_download}bytes\n/ g9 w; I9 A1 G' P- h speed_download: %{speed_download}B/s\n; z3 w5 k6 W# R6 R2 E3 I ----------\n 2 \. K! @; {. @! ^% @ time_total: %{time_total}s\n 0 n: w8 t' n0 s$ R1 f- P0 ` \n 8 h- _4 g- O" h- y# Y7 A& s# [

" }9 v8 L. P" P: W3 A; M3 |& H) i

执行命令:#curl -w "@curl_time.txt" -s -H "Content-Type: application/json" --insecure --header Host: passport.500.com --data {"platform":"android","userimei":"F5D815EA2BD8DBARD","app_channel":"10000","mbimei":"9DB358AF","version":"3.1.4","username":"hqzx","userpass":"976af4"} --compressed https://119.147.113.177/user/login/ b0 E8 |( m. f9 s1 }- W" Y

p# [4 b3 P& F9 X2 `: z( f4 c d' r

3、curl以post请求方法3.1、以json格式数据 #curl -H "Content-Type: application/json" -X POST --data {"data":"1"} http://127.0.0.1/$ s% \1 b! n) J4 S5 A& C/ ?9 n

5 T; m9 d' z: `. ]5 f

3.2、以&连接参数数据#curl -d "data=7778a8143f111272&score=19&app_key=8d49f16fe034b98b&_test_user=test01" "http://127.0.0.1" : O- p8 u3 `2 V6 S5 Z, E7 l

; s( G7 R- m2 b- H/ ~& D, W n7 j2 ^

3.3、 附带文本数据,比如通过"浏览"选择本地的card.txt并上传发送post请求,其中-F 为带文件的形式发送post请求,blob为文本框中的name元素对应的属性值' N5 ~7 ?' y* l; S2 j( k% \ R, g& _; H$ P; [" X, d% F; O #curl -F "blob=@card.txt;type=text/plain" "http://172.16.102.208:8089/wiapi/score?leaderboard_id=7778a8143f111272&score=40&app_key=8d49f16fe034b98b&_test_user=test01"- x0 d+ I" }) |5 @5 c3 u

. j5 U# b+ }. ~" J% Z. A3 p0 w

4、curl调试时常用命令:curl -o /home/1.txt -s -w %{time_connect}:%{time_starttransfer}:%{time_total}\n http://10.92.xx.xx/nwpp/ 1 q. A( p3 O* \

; v( W( N0 B5 M3 c

这里可以看到有6次异常,4次正常,证明url访问不是很稳定。后面可以考虑让开发写个jar包去检测每个节点的访问情况。

4 c' g8 \" P. ? ` w7 h

大家如果碰到url告警方面的问题可以考虑自己写一些命令参数,然后去请求特定url来判断问题,整体逻辑都差不多。后面会分享更多关于平时工作中碰到问题的一些解决办法,感兴趣的朋友可以关注下!

$ O0 V( N2 v' `) ?, x% a: ~, q6 \7 }8 S5 F% o1 m' A+ N5 E8 H 3 ]6 R. C, {6 A3 P, I7 S ' p- q2 ?" k7 j4 \, H: I 3 M7 Y3 e. F/ L; a

暂时无法加载帖子列表

回复

使用道具 举报

店小二 发表于 2026-06-03 16:38:44 | 显示全部楼层
完全赞同,我也是这么认为的,英雄所见略同~
回复

使用道具 举报

百香果马兰 发表于 2026-08-25 21:30:42 | 显示全部楼层
刚好遇到类似问题,看完这个帖子心里有底了
回复

使用道具 举报

13012541100 发表于 2026-08-28 01:40:36 | 显示全部楼层
学习到了,之前一直没注意过这个点,受教了
回复

使用道具 举报

安静的小猫 发表于 2026-08-30 06:35:30 | 显示全部楼层
说得很实在,没有夸大其词,这种真实分享太难得了
回复

使用道具 举报

阳光会有的 发表于 2026-08-30 08:46:43 | 显示全部楼层
这个分享太实用了,刚好能用到,感谢楼主!
回复

使用道具 举报

cardlanwen 发表于 2026-08-30 11:04:35 | 显示全部楼层
蹲了这么久,终于看到有价值的讨论,支持一下!
回复

使用道具 举报

yichen 发表于 2026-08-31 07:08:40 | 显示全部楼层
楼主太厉害了,整理得这么详细,必须支持
回复

使用道具 举报

_り隐╄_迹ヤ 发表于 2026-08-31 08:49:52 | 显示全部楼层
分析得很透彻,很多细节都说到点子上了~
回复

使用道具 举报

104团队 发表于 2026-09-09 19:24:28 | 显示全部楼层
内容很干货,没有多余的废话,值得反复看
回复

使用道具 举报

    您需要登录后才可以回帖 登录 | 加入怎通

    本版积分规则

    QQ|手机版|小黑屋|网站地图|真牛社区 ( 苏ICP备2023040716号-2 )

    GMT+8, 2026-9-11 23:28 , Processed in 0.041473 second(s), 25 queries , Gzip On.

    免责声明:本站信息来自互联网,本站不对其内容真实性负责,如有侵权等情况请联系420897364#qq.com(把#换成@)删除。

    Powered by Discuz! X3.5

    快速回复 返回顶部 返回列表