使用 Golang 通道处理 HTTP 请求

Question

我正在尝试构建一个简单的 Golang/Appengine 应用程序，它使用一个通道来处理每个 http 请求。原因是我希望每个请求都执行合理的大内存计算，并且每个请求都以线程安全的方式执行很重要（即来自并发请求的计算不会混合）。

基本上我需要一个同步队列，它一次只处理一个请求，并且通道看起来很合适。

Is it possible to use Go's buffered channel as a thread-safe queue?

但是，我无法让我的简单 hello world 示例正常工作。它似乎在'go process（w，cr）'行上失败了；我从服务器收到 200 响应，但没有内容。如果我从这一行中删除“go”，效果很好，但我猜我没有正确调用频道。

有人指出我哪里错了吗？

谢谢！

// curl -X POST "http://localhost:8080/add" -d "{\"A\":1, \"B\":2}"

package hello

import (
    "encoding/json"
    "net/http"  
)

type MyStruct struct {
    A, B, Total int64
}

func (s *MyStruct) add() {
    s.Total = s.A + s.B
}

func process(w http.ResponseWriter, cr chan *http.Request) {
    r := <- cr
    var s MyStruct
    json.NewDecoder(r.Body).Decode(&s)
    s.add()
    json.NewEncoder(w).Encode(s)
}

func handler(w http.ResponseWriter, r *http.Request) {  
    cr := make(chan *http.Request, 1)
    cr <- r
    go process(w, cr) // doesn't work; no response :-(
    // process(w, cr) // works, but blank response :-(
}

func init() {
    http.HandleFunc("/add", handler)
}

Answer 1

如果大型计算不使用共享可变状态，则编写一个普通的处理程序。不需要频道等等。

好的，大型计算确实使用共享可变状态。如果只有一个应用程序实例在运行，则使用 sync.Mutex 来控制对可变状态的访问。与将工作改组到单个 goroutine 来一次处理一个计算相比，这很简单。

您是否在 App Engine 上运行？您可能无法保证只有一个应用程序实例正在运行。您需要将数据存储或内存缓存用于可变状态。如果计算可以离线完成（在请求完成后），那么您可以使用 App Engine 任务队列一次处理一个计算。

附注：标题提出了问题正文中所述问题的解决方案。最好直接说明问题。我会在上面对此发表评论，但我没有所需的果汁。

Answer 2

不确定这是不是正确的设计，但我怀疑问题在于您从哪里开始第二个 go 例程，第一个 go 例程继续并完成写入连接等。

要停止这种情况，您可以使用等待组 (http://golang.org/pkg/sync/#WaitGroup) 让第一个例程等待。

这停止了您为什么尝试将其放入线程背后的整个推理（因此我认为您遇到了设计问题）。

这里有一些未经测试的代码，应该可以工作，或者至少有助于朝着正确的方向发展。

package main

import (
    "encoding/json"
    "net/http"
    "sync"  
)

type MyStruct struct {
    A, B, Total int64
}

func (s *MyStruct) add() {
    s.Total = s.A + s.B
}

func process(w http.ResponseWriter, cr chan *http.Request) {
    r := <- cr
    var s MyStruct
    json.NewDecoder(r.Body).Decode(&s)
    s.add()
    json.NewEncoder(w).Encode(s)
}

func handler(w http.ResponseWriter, r *http.Request) {  
    cr := make(chan *http.Request, 1)
    cr <- r
    var pleasewait sync.WaitGroup
    pleasewait.Add(1)

    go func() {
        defer pleasewait.Done()
        process(w, cr) // doesn't work; no response :-(
    }()
    // process(w, cr) // works, but blank response :-(

    pleasewait.Wait()
}

func main() {
    http.HandleFunc("/add", handler)
}