上一篇文章的数据:4,190 个任务、138,751 次工具调用,Bash 占 46.4%;Bash 里 curl 23,422 次、python 24,404 次。智能体发包基本就是这两条路。
两者都是按「人执行一次命令」设计的。智能体连续跑多步任务时,会碰到两个问题:请求指纹是工具自己的;进程退出后连接和会话也没了。gocurl 改的就是这两处。
指纹
curl 默认 UA 是 curl/8.x,requests 是 python-requests/2.x。只改 UA 不够,头也不一样:
| 字段 | curl | Chrome 152 |
|---|---|---|
Accept |
*/* |
text/html,application/xhtml+xml,... |
sec-ch-ua |
无 | "Chromium";v="152", ... |
sec-fetch-* |
无 | none / navigate / ?1 / document |
Accept-Encoding |
仅 --compressed |
gzip, deflate, br, zstd |
Accept-Language |
默认不发 | en-US,en;q=0.9 |
| H2 伪头顺序 | 实现相关 | :method :authority :scheme :path |
TLS 更直接。Linux 上的 curl 和 python requests 大多走 OpenSSL,Chrome 用 BoringSSL,ClientHello 里的 cipher、扩展、曲线、ALPN 都不同。JA3/JA4 从 ClientHello 算出来,握手阶段就能取,不需要解密。HTTPS 能挡住 UA,挡不住这个。
gocurl 用 tls-client + uTLS + fhttp,profile 固定 Chrome_152。README 记的 JA4 是 t13d1517h2_8daaf6152771_cb7bf5808d99,HTTP/2 Akamai 是 1:65536;2:0;4:6291456;6:262144|15663105|0|m,a,s,p。默认头顺序按 Chrome 152 排,-H 可以覆盖,--header-order 可以重排。--resolve/--connect-to 只改连接地址,Host、SNI、证书校验名不变。
指纹固定是刻意的。--tlsv1.x、--ciphers、--pinnedpubkey 这些都不支持,要探测 TLS 参数还是得用 curl。
连接
curl 每执行一次是一个新进程。进程退出,socket 被系统关掉,连接池、HTTP/2 流、TLS 会话缓存一起消失,下一条命令重新 DNS、TCP、TLS。单条命令请求多个 URL 或 --next 能在进程内复用,但 agent 通常一次 Bash 调用只发一条命令。
Cookie 可以靠 -c/-b 文件接力,但文件没有锁,并发任务会互相覆盖;它只存 Cookie,不存连接和 HTTP/2 状态。python 的 requests.Session() 能留住连接和 Cookie,但只在一个进程里有效,agent 每次起新 python,Session 也跟着销毁。
结果是每个请求完整握手。流量侧也能看到:浏览器复用少量连接,HTTP/2 还会多路复用;每条命令一组新连接不算强特征,但可以参与聚类。状态问题更实际,登录、跳转、CSRF token 本来在一个会话里,现在只能靠文件传。
gocurl 的做法
指纹部分上面说了,这里只看连接。
gocurl 默认起后台 daemon。第一次调用自动拉起,CLI 通过 Unix socket 通信。daemon 持有 HTTP/1.1 和 HTTP/2 连接池,所有请求共享 Cookie jar,空闲 15 分钟退出。--session 用独立 socket 隔离任务,--no-persist 禁用 daemon,启动失败回退直连。daemon 只服务 HTTP/HTTPS,FTP/WS 走直连。
CLI 进程照常退出,连接留在 daemon 里。下一条命令只要 transport 配置一致就能接着用。daemon 协议 v5 对没有 Content-Length 的响应用分块结束帧,区分正常结束和上游截断。
Cookie 的边界:daemon 的 jar 共享;-b 字符串只对当前请求生效,不写入共享 jar;-c 只导出当前目标 host 的 cookie,不落盘会随 daemon 退出丢失;--session 只隔离 socket、连接池和 jar,不是权限边界。socket 目录 0700、socket 0600,只接受同 UID 连接。
1 | ./gocurl -sS -c cookies.txt -d 'username=admin&password=...' https://target/login |
同 host、配置一致时,第二条命令不再握手,Cookie 从 daemon 的 jar 里取。中间 daemon 空闲退出的话,会重新建连。
--json-envelope 输出请求、响应、TLS 证书、耗时、重试和退出码,响应体超过 1 MiB 截断。对 agent 来说比解析 -w 稳定。
代码 11 个包、约 1 万行,218 个测试。daemon 单独成包,transport 和 config 不反向依赖 app,方便单独测试。
边界
- 所有 gocurl 流量都是同一个 Chrome 152 指纹,换 IP 也一样,可以被聚类。
- 过 TLS 中间人代理后,目标看到的是代理的指纹。
- daemon 只在同机、同 UID 下工作,不是分布式会话。
- Cookie 生命周期跟 daemon 绑定,不写
-c就会丢。 - HTTP/3、TLS 版本/cipher/pin 探测、真正的 Kerberos、畸形 HTTP 和请求走私、复杂 FTP,仍然要用 curl。
--json-envelope只支持 HTTP/HTTPS;FTP 主动模式不支持代理/FTPS/--interface。
需要浏览器指纹和连续会话时用它;需要协议探测、畸形报文或完整 curl 语义时,继续用 curl。
项目地址:https://github.com/howmp/gocurl
仅用于已获得授权的安全测试、资产自查和调试。