golang 实现并发求和


Posted in Golang onMay 08, 2021

使用golang并发求和,作为对golang并发的一个练习.

为了验证结果的正确性,要给出最传统的版本:

func sum1(data []int) int {
 s := 0
 l := len(data)
 for i := 0; i < l; i++ {
  s += data[i]
 }
 return s
}

第二种方法

使用N个goroutine, 然后将N个分段的和写入N个channel中:

func sum2(data []int) int {
 s := 0
 l := len(data)
 const N = 5
 seg := l / N
 var chs [N]<-chan int
 for i := 0; i < N; i++ {
  chs[i] = worker(data[i*seg : (i+1)*seg])
 }
 for i := 0; i < N; i++ {
  s += <-chs[i]
 }
 return s
}
func worker(s []int) <-chan int {
 out := make(chan int)
 go func() {
  length := len(s)
  sum := 0
  for i := 0; i < length; i++ {
   sum += s[i]
  }
  out <- sum
 }()
 return out
}

对于一个求和的任务来说,用worker这种“模式”可能 太过麻烦,

看第三种

直接一个函数写出来:

func sum3(data []int) int {
 s := 0
 l := len(data)
 const N = 5
 seg := l / N
 var mu sync.Mutex
 var wg sync.WaitGroup
 wg.Add(N) // 直接加N个
 for i := 0; i < N; i++ {
  go func(ii int) {
   tmpS := data[ii*seg : (ii+1)*seg]
   ll := len(tmpS)
   mu.Lock()
   for i := 0; i < ll; i++ {
    s += tmpS[i]
   }
   mu.Unlock()
   wg.Done() // 一个goroutine运行完
  }(i)
 }
 wg.Wait() // 等N个goroutine都运行完
 return s
}

注意sum3要在读写s的地方加锁,因为s可能被多个goroutine并发读写。

最后一种方法有data race问题

不过运行结果是对的,看一下思路:

var sum4Tmp int
var sum4mu sync.Mutex
// 这个有data race问题,可以用WaitGroup改,只是提供一种思路
func sum4(data []int) int {
 //s := 0
 l := len(data)
 const N = 5
 seg := l / N
 for i := 0; i < N; i++ {
  go subsum4(data[i*seg : (i+1)*seg])
 }
 // 这里是>1,因为要排除main
 // 这种方法不可靠,只是一种思路
 for runtime.NumGoroutine() > 1 {
 }
 // go run -race sum.go会报data race问题
 // main goroutine对它读
 // 别的goroutine会对它写(go subsum4)
 return sum4Tmp
}
func subsum4(s []int) {
 length := len(s)
 sum := 0
 sum4mu.Lock()
 for i := 0; i < length; i++ {
  sum += s[i]
 }
 sum4Tmp = sum4Tmp + sum
 defer sum4mu.Unlock()
}

最后测试如下:

首先创建一个slice, 放1e8(1亿)个整数(范围[0,10))进去,

然后用4种方法进行计算

func calcTime(f func([]int) int, arr []int, tag string) {
 t1 := time.Now().UnixNano()
 s := f(arr)
 t2 := time.Now().UnixNano() - t1
 fmt.Printf("%15s: time: %d, sum: %d\n", tag, t2, s)
}
func main() {
 const MAX = 1e8 // 1亿
 arr := make([]int, MAX)
 for i := 0; i < MAX; i++ {
  arr[i] = rand.Intn(10)
 }
 calcTime(sum1, arr, "for")
 calcTime(sum2, arr, "worker")
 calcTime(sum3, arr, "WaitGroup")
 calcTime(sum4, arr, "NumGoroutine")
}

我的笔记本输出结果:

for: time: 61834200, sum: 450032946

worker: time: 51861100, sum: 450032946

WaitGroup: time: 153628200, sum: 450032946

NumGoroutine: time: 63791300, sum: 450032946

欢迎补充指正!

补充:Golang并发求和(竞争而非分段)

举例

如果要求2个goroutine并发完成1到100的和而不是分段的情况如何解决呢?

解决方案:

var wg sync.WaitGroup
var ch chan int32
var receiveCh chan int32
func add(){
	var sum int32
	sum = 0
	Loop:
	for {
		select {
		case val, ok := <-ch:
			if ok {
				atomic.AddInt32(&sum, val)
			} else {
				break Loop
			}
		}
	}
	receiveCh <- sum
	wg.Done()
}
func main() {
	wg.Add(3)
	ch = make(chan int32)
	receiveCh = make(chan int32, 2)
	go func(){
		for i := 1; i <= 100; i++{
			n := i //避免数据竞争
			ch <- int32(n) 
		}
		close(ch)
		wg.Done()
	}()
	go add()
	go add()
	wg.Wait()
	close(receiveCh)
	var sum int32
	sum = 0
	for res := range receiveCh{
		sum += res
	}
	fmt.Println("sum:",sum)
}

以上为个人经验,希望能给大家一个参考,也希望大家多多支持三水点靠木。如有错误或未考虑完全的地方,望不吝赐教。

Golang 相关文章推荐
golang interface判断为空nil的实现代码
Apr 24 Golang
基于go interface{}==nil 的几种坑及原理分析
Apr 24 Golang
golang 如何通过反射创建新对象
Apr 28 Golang
golang goroutine顺序输出方式
Apr 29 Golang
Golang中interface{}转为数组的操作
Apr 30 Golang
golang协程池模拟实现群发邮件功能
May 02 Golang
解决goland 导入项目后import里的包报红问题
May 06 Golang
Go语言实现Snowflake雪花算法
Jun 08 Golang
再次探讨go实现无限 buffer 的 channel方法
Jun 13 Golang
Go 通过结构struct实现接口interface的问题
Oct 05 Golang
详解Golang如何优雅的终止一个服务
Mar 21 Golang
Golang原生rpc(rpc服务端源码解读)
Apr 07 Golang
golang中的并发和并行
May 08 #Golang
关于golang高并发的实现与注意事项说明
May 08 #Golang
基于Golang 高并发问题的解决方案
May 08 #Golang
使用golang编写一个并发工作队列
May 08 #Golang
Go 在 MongoDB 中常用查询与修改的操作
May 07 #Golang
golang 实现时间戳和时间的转化
May 07 #Golang
Golang Gob编码(gob包的使用详解)
May 07 #Golang
You might like
php查询相似度最高的字符串的方法
2015/03/12 PHP
PHP正则之正向预查与反向预查讲解与实例
2020/04/06 PHP
Javascript !!的作用
2008/12/04 Javascript
在多个页面使用同一个HTML片段《续》
2011/03/04 Javascript
新发现一个骗链接的方法(js读取cookies)
2012/01/11 Javascript
JS实现单行文字不间断向上滚动的方法
2015/01/29 Javascript
JS常见问题之为什么点击弹出的i总是最后一个
2016/01/05 Javascript
NodeJS连接MongoDB数据库时报错的快速解决方法
2016/05/13 NodeJs
jqueryUI tab标签页代码分享
2017/10/09 jQuery
js 数组详细操作方法及解析合集
2018/06/01 Javascript
JS函数节流和防抖之间的区分和实现详解
2019/01/11 Javascript
Vue使用mixin分发组件的可复用功能
2019/09/01 Javascript
vue 实现LED数字时钟效果(开箱即用)
2019/12/08 Javascript
NodeJS多种创建WebSocket监听的方式(三种)
2020/06/04 NodeJs
es5 类与es6中class的区别小结
2020/11/09 Javascript
js定时器出现第一次延迟的原因及解决方法
2021/01/04 Javascript
python操作MySQL 模拟简单银行转账操作
2017/09/27 Python
python3写爬取B站视频弹幕功能
2017/12/22 Python
人生苦短我用python python如何快速入门?
2018/03/12 Python
解决python删除文件的权限错误问题
2018/04/24 Python
css3实现背景模糊的三种方式(小结)
2020/05/15 HTML / CSS
欧洲顶级的童装奢侈品购物网站:Bambini Fashion(面向全球)
2018/04/24 全球购物
英国假睫毛购买网站:FalseEyelashes.co.uk
2018/05/23 全球购物
Foot Locker德国官方网站:美国运动服和鞋类零售商
2018/11/01 全球购物
新西兰网上购物,折扣店:BestDeals.co.nz
2019/03/20 全球购物
The North Face官方旗舰店:美国著名户外品牌
2020/09/28 全球购物
公司活动策划方案
2014/01/13 职场文书
岗位廉洁从业承诺书
2014/03/28 职场文书
第二批党的群众路线教育实践活动总结报告
2014/10/30 职场文书
当你找不到方向的时候,不妨读读刘备的一生
2019/08/05 职场文书
Python中使用Lambda函数的5种用法
2021/04/01 Python
Python实战之实现康威生命游戏
2021/04/26 Python
Vue项目中如何封装axios(统一管理http请求)
2021/05/02 Vue.js
解决sql server 数据库,sa用户被锁定的问题
2021/06/11 SQL Server
使用ICOM IC-R9500接收机同时测评十台收音机中波接收性能
2022/05/10 无线电
Hive导入csv文件示例
2022/06/25 数据库