深入理解go slice结构


Posted in Golang onSeptember 15, 2021

文章

slice介绍

append的机制

slice tricks

go data

slice

array的语法: [4]int{1,2,3,4}, [...]int{1,2,3}。在go中array是值类型,这就意味着一个类型为array的变量名并不是一个指针,当传递值是,array总是被复制。

slice的语法: []int{1,2,3,4}, make([]int), make([]int,10)

当make只有两个参数时,cap和len相同。

slice本质上是array的一个片段的描述,它包含3部分:
[ptr, len, cap]

通过make([]int, 5)创建的slice,其内存布局如下:

深入理解go slice结构

对这个slice进行截断之后,形成新的slice:

深入理解go slice结构

使用cap可以对slice进行扩增: s[:cap(s)].

copy(dst, src []T) int的用法: copy会复制dst和src中长度最小的元素所对应的数量(所以如果dst==nil, 则copy返回0)。并且,copy还能处理dst和src存在重叠的情况。
用法:

t := make([]byte, len(s), (cap(s)+1)*2)
copy(t, s)
s = t

append(dst []T, element...T) []T的实现,与下面的AppendByte类似:
首先检查容量,容量不足则使用make构造一个新的slice并将原来的元素移动。

func AppendByte(slice []byte, data ...byte) []byte {
    m := len(slice)
    n := m + len(data)
    if n > cap(slice) { // if necessary, reallocate
        // allocate double what's needed, for future growth.
        newSlice := make([]byte, (n+1)*2)
        copy(newSlice, slice)
        slice = newSlice
    }
    slice = slice[0:n]
    copy(slice[m:n], data)
    return slice
}

slice对gc的影响(gotcha)

如果对一个很大的数组,取其中很小的一段切片,都会造成这个数组不会被gc回收。
gc使用mark-and-sweep(标记清除)。gc维护一个已分配的堆对象表,在标记阶段,它将寄存器,堆栈上的指针作为root进行遍历标记。

为什么部分slice会导致整体的array不会回收呢?设想下面的slice:

a := [4]int{0,1,2,3}
s := a[1:2] // {1}
return s

a会不会被回收呢?答案是不会,因为gc遍历s时,通过data指针找到对应的array切片,它发现这个地址在之前分配的一个array对象的范围内,从而标记这个array为可到达对象,避免其被整个清除。(这里所要理解的就是array是按范围标记的,并不是按指针头标记的,因为一个内存块对象是有范围的,如果被部分引用,说明整个对象仍然是可达的。)

如何解决?如果是这种情况,一个较大array返回较小切片,可以使用复制:

before:

var digitRegexp = regexp.MustCompile("[0-9]+")

func FindDigits(filename string) []byte {
    b, _ := ioutil.ReadFile(filename)
    return digitRegexp.Find(b)
}

after:

func CopyDigits(filename string) []byte {
    b, _ := ioutil.ReadFile(filename)
    b = digitRegexp.Find(b)
    c := make([]byte, len(b))
    copy(c, b)
    return c
}

reflect.SliceHeader

package reflect

// SliceHeader和StringHeader具有相同的Data和Len,这导致[]byte可以直接转换成string,而不需要任何复制
type SliceHeader struct {
	Data uintptr
	Len  int
	Cap  int
}
type StringHeader struct {
	Data uintptr
	Len  int
}

转换代码:

func SliceByteAsString(b []byte) string {
    return *(*string)(unsafe.Pointer(&b))
}
func StringAsSliceByte(s string) []byte {
    p := unsafe.Pointer(&d)
    var b []byte
    hdr :=  (*reflect.SliceHeader)(unsafe.Pointer(&b))
    hdr.Data = uintptr(p)
    hdr.Cap = len(s)
    hdr.Len = len(s)
    return b
}

func Int64AsByteSlice(d int64) []byte {
    p := unsafe.Pointer(&d)
    var b []byte
    hdr :=  (*reflect.SliceHeader)(unsafe.Pointer(&b))
    hdr.Data = uintptr(p)
    hdr.Cap = 8
    hdr.Len = 8
    return b
}

到此这篇关于go slice结构的文章就介绍到这了,更多相关go slice结构内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Golang 相关文章推荐
golang interface判断为空nil的实现代码
Apr 24 Golang
浅谈Golang 嵌套 interface 的赋值问题
Apr 29 Golang
解决Golang time.Parse和time.Format的时区问题
Apr 29 Golang
goland设置颜色和字体的操作
May 05 Golang
Golang: 内建容器的用法
May 05 Golang
完美解决golang go get私有仓库的问题
May 05 Golang
详解Go语言Slice作为函数参数的使用
Jul 02 Golang
golang中的struct操作
Nov 11 Golang
golang用type-switch判断interface的实际存储类型
Apr 14 Golang
Golang日志包的使用
Apr 20 Golang
Golang map映射的用法
Apr 22 Golang
Go语言入门exec的基本使用
May 20 Golang
Golang表示枚举类型的详细讲解
golang 语言中错误处理机制
Aug 30 #Golang
Golang并发操作中常见的读写锁详析
Aug 30 #Golang
Go中的条件语句Switch示例详解
Aug 23 #Golang
Go Plugins插件的实现方式
Aug 07 #Golang
使用GO语言实现Mysql数据库CURD的简单示例
Aug 07 #Golang
go使用Gin框架利用阿里云实现短信验证码功能
Aug 04 #Golang
You might like
如何去掉文章里的 html 语法
2006/10/09 PHP
用PHP+java实现自动新闻滚动窗口
2006/10/09 PHP
php 数组使用详解 推荐
2011/06/02 PHP
ThinkPHP 防止表单重复提交的方法
2011/08/08 PHP
php使用curl伪造来源ip和refer的方法示例
2018/05/08 PHP
php图片裁剪函数
2018/10/31 PHP
Hutia 的 JS 代码集
2006/10/24 Javascript
JS提交并解析后台返回的XML的代码
2008/11/03 Javascript
javascript 事件绑定问题
2011/01/01 Javascript
js中的scroll和offset 使用比较的实例与分析
2013/09/29 Javascript
javascript处理表单示例(javascript提交表单)
2014/04/28 Javascript
Javascript实现多彩雪花从天降散落效果的方法
2015/02/02 Javascript
提高jQuery性能优化的技巧
2015/08/03 Javascript
javascript与Python快速排序实例对比
2015/08/10 Javascript
javascript实现在下拉列表中显示多级树形菜单的方法
2015/08/12 Javascript
基于JS实现textarea中获取动态剩余字数的方法
2016/05/25 Javascript
javascript的函数劫持浅析
2016/09/26 Javascript
AngularJS的ng-click传参的方法
2017/06/19 Javascript
详解微信小程序审核不通过的解决方法
2018/01/17 Javascript
vue@cli3项目模板怎么使用public目录下的静态文件
2020/07/07 Javascript
vue实现公共方法抽离
2020/07/31 Javascript
微信小程序用户登录和登录态维护的实现
2020/12/10 Javascript
Python处理JSON数据并生成条形图
2016/08/05 Python
Python 备份程序代码实现
2017/03/06 Python
Python算术运算符实例详解
2017/05/31 Python
python实现决策树
2017/12/21 Python
python中dict字典的查询键值对 遍历 排序 创建 访问 更新 删除基础操作方法
2018/09/13 Python
pyhton中__pycache__文件夹的产生与作用详解
2019/11/24 Python
玩具反斗城西班牙网上商城:ToysRUs西班牙
2017/01/19 全球购物
美国顶级水上运动专业店:Marine Products
2018/04/15 全球购物
英国领先的大码时装品牌之一:Elvi
2018/08/26 全球购物
屈臣氏马来西亚官网:Watsons马来西亚
2019/06/15 全球购物
车间组长岗位职责
2013/12/20 职场文书
学校后勤人员职责
2013/12/27 职场文书
拾金不昧锦旗标语
2014/06/27 职场文书
人力资源管理专业求职信
2014/07/23 职场文书