没有数据要读取时，socket read() 会挂起一段时间

Question

嗨，我正在编写一个简单的 http 端口转发器。我从端口 80 读取数据，并将数据传递到我的 lighttpd 服务器，端口为 8080。

只要我在端口 8080 上的套接字上 write() 数据（转发请求）就没有问题，但是当我从该套接字读取（）数据（转发响应）时，最后一个 read() 挂了很多（大约 1 或 2 秒）在意识到没有更多数据并返回 0 之前。

我尝试将套接字设置为非阻塞，但这不起作用，因为有时它会返回 EWOULDBLOCKING，即使还剩下一些数据（lighttpd + cgi 可能会很慢）。 我尝试使用 select() 设置超时，但是，如上所述，当实际上有一些数据要传输时，慢速 cgi 可能会使套接字超时。

---

更新：已解决。毕竟是keepalive。在我的 lighttpd 配置文件中禁用它后，整个事情运行完美。

Answer 1

好吧，为了完成，根据我的评论：

很可能 HTTP 服务器本身（在您的情况下为 lighttpd）正在维护与您的代理的持久连接，因为您的代理中继了一个包含“Connection: keep-alive”的标头。当客户端想要通过同一连接发出多个请求时，此标头会有所帮助。因此，因为 lighttpd 收到了这个标头，它假定它将接收更多请求并保持套接字打开，导致 read 在您的代理中阻塞。

在您的 lighttpd 配置中禁用 keep-alive 是解决此问题的一种方法，但您也可以在将标头中的“Connection: keep-alive”中继到 Web 服务器之前将其删除。

Answer 2

使用 both 非阻塞套接字 和 select 是正确的方法。返回 EWLOULDBLOCK 并不意味着整个数据流都已完成接收，这意味着瞬间没有任何内容可读取。这正是您想要的，因为这意味着read 甚至不会等待半秒来显示更多数据。如果数据不能立即可用，它将返回。

现在，很明显，这意味着您需要多次调用read 才能获得完整的数据。执行此操作的一般格式是选择循环。在伪代码中：

do
  select ( my_sockets )

  if ( select error ) 
    handle_error
  else
    for each ( socket in my_sockets ) do
      if ( socket is ready ) then
        nonblocking read from socket
        if ( no data was read ) then
          close socket
          remove socket from my_sockets
        endif
      endif
    loop
  endif
loop

这个想法是select 会告诉你哪些套接字有数据可供读取现在。如果您读取其中一个套接字，则保证您要么获取数据，要么获取返回值 0，表示远程端关闭了套接字。

如果您使用此方法，您将永远不会被困在不读取数据的read 调用中，无论多长时间。阻塞操作是select调用，如果需要写也可以选择overwriteable sockets，如果需要定期做事可以设置超时。

Answer 3

不要那样做！

Keepalive 可提高其他客户端的性能。相反，修复你的客户。在您的客户端中发送 Connection: close 标头，并确保您的请求未声明 HTTP/1.1 合规性。 （如果没有其他原因，您可能也不处理分块编码。）

Answer 4

我想我会使用非阻塞 I/O 来完全扩展。而不是设置超时，我宁愿等待事件：

while(select(...)) {
    switch(...) {
    case ...: // Handle accepting new connection
    case ...: // Handle reading from socket
    ...
    }
}

单线程阻塞转发器无论如何都会导致多个客户端出现问题。

抱歉 - 我不记得确切的电话。在某些情况下也可能很奇怪（IIRC - 你需要处理写入），但有一些库可以简化任务。