golang 固定worker 工作池

服务器编程使用最多的就是通过线程池提升服务的并发执行能力,在go语言中,一样可以轻松的构建固定数目的goroutine作为线程池,下面通过计算多个整数的和来说明这种并发范式。

设计思路:

 除了主要的main goroutine ,还需开启以下几类goroutine

   1,初始化任务的goroutine

   2,分发任务的goroutine

   3,等到所有work结束,然后关闭所有通道的goroutine

main主要负责拉起以上的goroutine 冰火取结果

 程序还需要三个通道

  1,传递task任务的通道

  2,传递task结果的通道

 3 ,接收workder处理完任务后所发送通知的通道

具体代码如下

package go_worker

import (
    "fmt"
)

//定义工作数量
const (
    WORKS=5
)

//定义工作任务结构体,可根据需求改变
type task struct {
    begin int
    end int
    result  chan<- int
}
//定义执行任务的方法,可根据需求更改
func (t *task) do(){
    sum:=0
    for i:=t.begin;i<=t.end;i++{
        sum++
    }
    t.result<-sum
}

//入口函数

func main(){
    works:=WORKS
    //定义工作通道
    taskchan:=make(chan task,10)
    //定义结果通道
    resultchan:=make(chan int,10)
    //work工作信号通道
    done:=make(chan struct{},10)
    //初始化task的goroutine
    go initTask(taskchan,resultchan,100);
    //分发任务到协程池
    distributeTask(taskchan,works,done)
    //获取goroutine处理完成任务通知,并关闭通道
    go closeResult(done,resultchan,works)
    //通过结果通道,获取结果并汇总
    sum:=processResult(resultchan)
    fmt.Println("sum=",sum)
}
//初始化task chan
func initTask(taskchan chan<-task,r chan int ,p int){
    qu:=p/10
    mod:=p%10
    high:=qu*10;
    for j:=0;j<qu;j++{
        b:=10*j+1
        e:=10*(j+1)
        task:=task{
            begin:b,
            end:e,
            result:r,
        }
        taskchan<-task
    }
    if mod!=0{
        task:=task{
            begin:high+1,
            end:p,
            result:r,
        }
        taskchan<-task
    }
    close(taskchan)
}

//读取taskchan 并分发到worker goRoutine处理,总数量为workers
func distributeTask(taskchan<-chan task,workers int ,done chan struct{}){
    for i:=0;i<workers;i++{
        go processTask(taskchan,done)
    }
}
//工作goroutine处理的具体内容,并将处理的结果发送到结果chan
func processTask(taskchan <-chan task,done chan struct{}){
    for t:=range taskchan{
        t.do()
    }
    done<- struct{}{}
}

//通过done channel同步等待所有工作goroutine的结束,然后关闭结果chan
func closeResult(done chan struct{},resultchan chan int ,workers int ){
    for i:=0;i<workers;i++{
        <-done
    }
    close(done)
    close(resultchan)
}

//读取结果通道汇聚结果

func processResult(resultchan chan int )int{
    sum:=0
    for r:=range resultchan{
        sum+=r
    }
    return sum
}

ok ,至此,程序结束,可将task和task.do() 替换成自己的已有逻辑执行

 

posted @ 2020-08-19 00:07  菜鸟的进击  阅读(763)  评论(0编辑  收藏  举报