Go:读取 AWS ALB 代理的请求的 i/o 超时

问题描述

我们有一个用 Go 编写的非常标准的 API 服务器。 http 处理程序将请求正文 (JSON) 解组为 protobuf 结构,并将其发送出去进行处理。

该服务在 AWS 上部署为 ECS 容器,由 ALB 负责。该服务的请求量非常高,我们观察到大约 0.2% 的请求失败并显示如下消息:

read tcp $ECS_CONTAINER_IP:$PORT->$REMOTE_IP:$REMOTE_RANDOM_PORT: I/O timeout

我们追踪到错误是从 jsonpb.Unmarshal 方法返回的。我们的跟踪告诉我们所有这些 I/O 超时请求都需要 5 秒。

在容器内,我们做了ss -t | wc -l查看航班请求,数量相当合理(大约200-300ish,远低于no-file ulimit)。

一些快速的 awk/sort/uniq 告诉我们来自 ALB 的进行中请求的数量大致平衡。

知道我们如何从这里开始吗?

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)