golang 实现并发求和


Posted in Golang onMay 08, 2021

使用golang并发求和,作为对golang并发的一个练习.

为了验证结果的正确性,要给出最传统的版本:

func sum1(data []int) int {
 s := 0
 l := len(data)
 for i := 0; i < l; i++ {
  s += data[i]
 }
 return s
}

第二种方法

使用N个goroutine, 然后将N个分段的和写入N个channel中:

func sum2(data []int) int {
 s := 0
 l := len(data)
 const N = 5
 seg := l / N
 var chs [N]<-chan int
 for i := 0; i < N; i++ {
  chs[i] = worker(data[i*seg : (i+1)*seg])
 }
 for i := 0; i < N; i++ {
  s += <-chs[i]
 }
 return s
}
func worker(s []int) <-chan int {
 out := make(chan int)
 go func() {
  length := len(s)
  sum := 0
  for i := 0; i < length; i++ {
   sum += s[i]
  }
  out <- sum
 }()
 return out
}

对于一个求和的任务来说,用worker这种“模式”可能 太过麻烦,

看第三种

直接一个函数写出来:

func sum3(data []int) int {
 s := 0
 l := len(data)
 const N = 5
 seg := l / N
 var mu sync.Mutex
 var wg sync.WaitGroup
 wg.Add(N) // 直接加N个
 for i := 0; i < N; i++ {
  go func(ii int) {
   tmpS := data[ii*seg : (ii+1)*seg]
   ll := len(tmpS)
   mu.Lock()
   for i := 0; i < ll; i++ {
    s += tmpS[i]
   }
   mu.Unlock()
   wg.Done() // 一个goroutine运行完
  }(i)
 }
 wg.Wait() // 等N个goroutine都运行完
 return s
}

注意sum3要在读写s的地方加锁,因为s可能被多个goroutine并发读写。

最后一种方法有data race问题

不过运行结果是对的,看一下思路:

var sum4Tmp int
var sum4mu sync.Mutex
// 这个有data race问题,可以用WaitGroup改,只是提供一种思路
func sum4(data []int) int {
 //s := 0
 l := len(data)
 const N = 5
 seg := l / N
 for i := 0; i < N; i++ {
  go subsum4(data[i*seg : (i+1)*seg])
 }
 // 这里是>1,因为要排除main
 // 这种方法不可靠,只是一种思路
 for runtime.NumGoroutine() > 1 {
 }
 // go run -race sum.go会报data race问题
 // main goroutine对它读
 // 别的goroutine会对它写(go subsum4)
 return sum4Tmp
}
func subsum4(s []int) {
 length := len(s)
 sum := 0
 sum4mu.Lock()
 for i := 0; i < length; i++ {
  sum += s[i]
 }
 sum4Tmp = sum4Tmp + sum
 defer sum4mu.Unlock()
}

最后测试如下:

首先创建一个slice, 放1e8(1亿)个整数(范围[0,10))进去,

然后用4种方法进行计算

func calcTime(f func([]int) int, arr []int, tag string) {
 t1 := time.Now().UnixNano()
 s := f(arr)
 t2 := time.Now().UnixNano() - t1
 fmt.Printf("%15s: time: %d, sum: %d\n", tag, t2, s)
}
func main() {
 const MAX = 1e8 // 1亿
 arr := make([]int, MAX)
 for i := 0; i < MAX; i++ {
  arr[i] = rand.Intn(10)
 }
 calcTime(sum1, arr, "for")
 calcTime(sum2, arr, "worker")
 calcTime(sum3, arr, "WaitGroup")
 calcTime(sum4, arr, "NumGoroutine")
}

我的笔记本输出结果:

for: time: 61834200, sum: 450032946

worker: time: 51861100, sum: 450032946

WaitGroup: time: 153628200, sum: 450032946

NumGoroutine: time: 63791300, sum: 450032946

欢迎补充指正!

补充:Golang并发求和(竞争而非分段)

举例

如果要求2个goroutine并发完成1到100的和而不是分段的情况如何解决呢?

解决方案:

var wg sync.WaitGroup
var ch chan int32
var receiveCh chan int32
func add(){
	var sum int32
	sum = 0
	Loop:
	for {
		select {
		case val, ok := <-ch:
			if ok {
				atomic.AddInt32(&sum, val)
			} else {
				break Loop
			}
		}
	}
	receiveCh <- sum
	wg.Done()
}
func main() {
	wg.Add(3)
	ch = make(chan int32)
	receiveCh = make(chan int32, 2)
	go func(){
		for i := 1; i <= 100; i++{
			n := i //避免数据竞争
			ch <- int32(n) 
		}
		close(ch)
		wg.Done()
	}()
	go add()
	go add()
	wg.Wait()
	close(receiveCh)
	var sum int32
	sum = 0
	for res := range receiveCh{
		sum += res
	}
	fmt.Println("sum:",sum)
}

以上为个人经验,希望能给大家一个参考,也希望大家多多支持三水点靠木。如有错误或未考虑完全的地方,望不吝赐教。

Golang 相关文章推荐
go语言求任意类型切片的长度操作
Apr 26 Golang
Go语言中的UTF-8实现
Apr 26 Golang
Go 实现英尺和米的简单单位换算方式
Apr 29 Golang
golang elasticsearch Client的使用详解
May 05 Golang
Goland使用Go Modules创建/管理项目的操作
May 06 Golang
浅谈Golang 切片(slice)扩容机制的原理
Jun 09 Golang
Golang 1.18 多模块Multi-Module工作区模式的新特性
Apr 11 Golang
golang操作redis的客户端包有多个比如redigo、go-redis
Apr 14 Golang
Golang 切片(Slice)实现增删改查
Apr 22 Golang
Golang 并发编程 SingleFlight模式
Apr 26 Golang
Go语言测试库testify使用学习
Jul 23 Golang
Go语言编译原理之源码调试
Aug 05 Golang
golang中的并发和并行
May 08 #Golang
关于golang高并发的实现与注意事项说明
May 08 #Golang
基于Golang 高并发问题的解决方案
May 08 #Golang
使用golang编写一个并发工作队列
May 08 #Golang
Go 在 MongoDB 中常用查询与修改的操作
May 07 #Golang
golang 实现时间戳和时间的转化
May 07 #Golang
Golang Gob编码(gob包的使用详解)
May 07 #Golang
You might like
PHP程序员编程注意事项
2008/04/10 PHP
PHP中使用Memache作为进程锁的操作类分享
2015/03/30 PHP
PHP全局使用Laravel辅助函数dd
2019/12/26 PHP
尽可能写&quot;友好&quot;的&quot;Javascript&quot;代码
2007/01/09 Javascript
Microsoft Ajax Minifier 压缩javascript的方法
2010/03/05 Javascript
js设置组合快捷键/tabindex功能的方法
2013/11/21 Javascript
JavaScript获得url所有参数键值表的方法
2015/03/21 Javascript
javascript动态添加checkbox复选框的方法
2015/12/23 Javascript
jQuery插件实现文字无缝向上滚动效果代码
2016/02/25 Javascript
树结构之JavaScript
2017/01/24 Javascript
vue判断input输入内容全是空格的方法
2018/03/02 Javascript
React全家桶环境搭建过程详解
2018/05/18 Javascript
浅谈目前可以使用ES10的5个新特性
2019/06/25 Javascript
react 原生实现头像滚动播放的示例
2020/04/21 Javascript
python多重继承新算法C3介绍
2014/09/28 Python
Django框架中数据的连锁查询和限制返回数据的方法
2015/07/17 Python
Python 正则表达式的高级用法
2016/12/04 Python
Python实现利用最大公约数求三个正整数的最小公倍数示例
2017/09/30 Python
Python从单元素字典中获取key和value的实例
2018/12/31 Python
python画环形图的方法
2020/03/25 Python
Python restful框架接口开发实现
2020/04/13 Python
详解CSS3的图层阴影和文字阴影效果使用
2016/06/09 HTML / CSS
使用canvas绘制超炫时钟
2014/12/17 HTML / CSS
澳大利亚冲浪和时尚服装网上购物:SurfStitch
2017/07/29 全球购物
可以在一个PHP文件里面include另外一个PHP文件两次吗
2015/05/22 面试题
特色冷饮店创业计划书
2014/01/28 职场文书
祖国在我心中的演讲稿
2014/05/04 职场文书
学校火灾防控方案
2014/06/09 职场文书
2014国庆黄金周超市促销活动方案
2014/09/21 职场文书
2015年销售内勤工作总结
2015/04/27 职场文书
工程质量保证书
2015/05/09 职场文书
2016教师政治学习心得体会
2016/01/23 职场文书
研究生学习计划书应该怎么写?
2019/09/10 职场文书
浅谈golang 中time.After释放的问题
2021/05/05 Golang
分析JVM源码之Thread.interrupt系统级别线程打断
2021/06/29 Java/Android
Win10玩csgo闪退如何解决?Win10玩csgo闪退的解决方法
2022/07/23 数码科技