Golang Go语言中如何立即关闭 http client 产生的 connection
Golang Go语言中如何立即关闭 http client 产生的 connection
按部分回答中的方法全局使用同一个 client 和 transport 之后，依然出现 goroutine 泄露 导致的 fd 增长
发现 如果同时设置 http.client timeout 和 transport dial timeout 则会出现 socket too many open files 的错误，我在程序中通过一个 queueChan 的 bufferd channel 控制同时请求数量。但是根据 pprof 调试和 /proc/pid/fd 中的 socket 文件数量, 得出结论为旧的请求还未彻底关闭 新的请求又被创建最终导出的 fd 满了 同时 nestat 中有大量TIME_WAIT
如果只设置 transport dial timeout，不设置 http.client timeout 则 goroutine 数量和 queueChan 长度一致，fd 数量也正常，但是 netstat 出现大量的ESTABLISHED， 并且请求超过 timeout 也不结束
那回到最初的问题 ：
- tranport 中 不同的 protocol 和 proxy host 能否复用 tcp connection ？
- 请求结束时如何立即关闭 connection ？
更多关于Golang Go语言中如何立即关闭 http client 产生的 connection的实战系列教程也可以访问 https://www.itying.com/category-94-b0.html
- 不能 可以用个 map[proxyUrl]Tranposrt 管理 proxy Transport 2. http.Request 有 Close 字段，设置后就是短连接，请求后关闭连接. 也可以设置 httpClient 的 Tranport disableKeepAlive=true 使得默认不 keepAlive，这样也是请求后关闭连接
是的，如果你每个请求一个不同的 proxy，那么第二点设置多大都没用，因为从网络原理来说，你在跟不同的代理服务器建立连接，根本无法复用。
这种时候只能调低点访问速度。连接关闭之后是有个等待时间的，如果在短时间内关闭太多连接，新发起请求时连接都还处于正在关闭的状态中，没有新的连接能建立，这时候就会报你这样的错。
在 Go 语言中，HTTP 客户端（http.Client）默认情况下会管理连接池，以复用连接来提高性能。然而，在某些情况下，你可能需要立即关闭一个 HTTP 客户端产生的连接。
需要明确的是，直接关闭底层的 TCP 连接在 Go 的 net/http 包中并不总是直接暴露出来的。标准库提供了高级的接口来管理连接池，但没有直接的方法来关闭一个特定的连接。
不过，你可以通过以下几种方式间接实现类似的效果：
-
取消请求：使用
context.Context来取消正在进行的 HTTP 请求。这会导致连接被尽早释放回连接池，虽然不直接关闭连接，但可以减少连接占用时间。 -
调整
Transport设置：你可以配置http.Client的Transport字段，设置IdleConnTimeout和MaxIdleConns等参数，来限制空闲连接的生命周期和数量。 -
自定义
http.RoundTripper：实现一个自定义的http.RoundTripper，在每次请求后关闭连接。这通常涉及到底层 TCP 连接的管理，需要小心处理以避免资源泄漏。 -
关闭
http.Client：如果你确定不再需要使用该客户端，可以通过将http.Client的Transport字段设为nil（如果它使用了默认的Transport），然后让垃圾回收器回收资源。不过，这不会立即关闭所有连接，只是释放了客户端的引用。
总的来说，直接关闭特定连接在 Go 的 net/http 包中并不简单，通常需要通过调整客户端的行为和配置来间接实现。
