大量 HTTP 请求调第三方慢接口引起的 fd 耗尽问题

[chillingkitten]

由于历史原因和业务所限，我手头有个 web 项目对外提供接口，内部又是调第三方的服务。
第三方的服务本来就比较慢，动不动就是超过 1s 才返回。 现在不定期会出事故：现象就是调这个服务的接口阻塞住，等到超时才关闭连接释放资源，这期间不断新的请求又进来，最终耗尽文件句柄数，服务器大量 CLOSE_WAIT，程序假死，进程还在，但是对外服务基本大量瘫痪。
项目里面用的网络调用方法也就是 HttpClient 封装了下，加了点日志这些。当然最后也有关闭资源的代码。
之前每次发生，只有重启服务，把这个工具类的超时时间设短一点，目前是 3s

但这感觉治标不治本。三方接口本来就慢的话，正常返回都过 1s，大量请求进来感觉还是挡不住吧。 有什么好的方法么？ 只能横向扩展加机器么？