图解go反射实现原理

RyuGou · · 388 次点击 · · 开始浏览    
这是一个创建于 的文章,其中的信息可能已经有所发展或是发生改变。

Go反射的实现和``interface``和``unsafe.Pointer``密切相关。如果对golang的``interface``底层实现还没有理解,可以去看我之前的文章:[Go语言interface底层实现](https://mp.weixin.qq.com/s/re_9CmGm3xEbY7xCr5CYbQ),``unsafe.Pointer``会在后续的文章中做介绍。 (本文目前使用的Go环境是Go 1.12.9) ## interface回顾 首先我们简单的回顾一下interface的结构,总体上是: ![](https://i6448038.github.io/img/reflection/interface_total.png) 细分下来分为有函数的``iface``和无函数的``eface``(就是``interface{}``); **无函数的``eface``** ![](https://i6448038.github.io/img/reflection/eface.png) **有函数的``iface``** ![](https://i6448038.github.io/img/reflection/iface.png) ### **静态类型**(static interface type)和**动态混合类型**(dynamic concrete type) Go语言中,每个变量都有唯一个**静态类型**,这个类型是编译阶段就可以确定的。有的变量可能除了静态类型之外,还会有**动态混合类型**。 例如以下例子: ```go //带函数的interface var r io.Reader tty, err := os.OpenFile("/dev/tty", os.O_RDWR, 0) if err != nil { return nil, err } r = tty //不带函数的interface var empty interface{} empty = tty ``` **有函数的``iface``的例子** 我们一句一句来看:第1行,``var r io.Reader`` ![](https://i6448038.github.io/img/reflection/iface1.png) 第4行至第七行就是简单的赋值,得到一个``*os.File``的实例,暂且不看了。最后一句第十句``r = tty`` ![](https://i6448038.github.io/img/reflection/iface2.png) **无函数的``eface``的例子** 我们接着往下看,``var empty interface{}`` ![](https://i6448038.github.io/img/reflection/eface1.png) 最后是``empty = tty`` ![](https://i6448038.github.io/img/reflection/eface2.png) 但是记住:虽然有**动态混合类型**,但是对外"表现"依然是静态类型。 ## Go反射简介 Go反射有三大法则: ``` //接口数据 =====》 反射对象 1. Reflection goes from interface value to reflection object. //反射对象 ===> 接口数据 2. Reflection goes from reflection object to interface value. // 倘若数据可更改,可通过反射对象来修改它 3. To modify a reflection object, the value must be settable. ``` Go 的反射就是对以上三项法则的实现。 Go的反射主要由两部分组成:``Type``和``Value``,``Type``和``Value``是俩结构体:(这俩结构体具体内容可以略过不看,知道有这回事儿就行了) Type: ```go type Type interface { Align() int FieldAlign() int Method(int) Method MethodByName(string) (Method, bool) NumMethod() int Name() string PkgPath() string Size() uintptr String() string Kind() Kind Implements(u Type) bool AssignableTo(u Type) bool ConvertibleTo(u Type) bool Comparable() bool Bits() int ChanDir() ChanDir IsVariadic() bool Elem() Type Field(i int) StructField FieldByIndex(index []int) StructField FieldByName(name string) (StructField, bool) FieldByNameFunc(match func(string) bool) (StructField, bool) In(i int) Type Key() Type Len() int NumField() int NumIn() int NumOut() int Out(i int) Type common() *rtype uncommon() *uncommonType } ``` Value: ```go type Value struct { typ *rtype ptr unsafe.Pointer flag } ``` 你会发现反射的实现和interface的组成很相似,都是由“类型”和“数据值”构成,但是值得注意的是:interface的“类型”和“数据值”是在“一起的”,而反射的“类型”和“数据值”是分开的。 ``Type``和``Value``提供了非常多的方法:例如获取对象的属性列表、获取和修改某个属性的值、对象所属结构体的名字、对象的底层类型(underlying type)等等 Go中的反射,在使用中最核心的就两个函数: + reflect.TypeOf(x) + reflect.ValueOf(x) 这两个函数可以分别将给定的数据对象转化为以上的``Type``和``Value``。这两个都叫做``反射对象`` ### Reflection goes from interface value to reflection object(法则一) 给定一个数据对象,可以将数据对象转化为反射对象``Type``和``Value``。 ![](https://i6448038.github.io/img/reflection/law1.png) 事例代码: ```go package main import ( "fmt" "reflect" ) func main() { var x float64 = 3.4 t := reflect.TypeOf(x) v := reflect.ValueOf(x) fmt.Println("type:", t) //type: float64 fmt.Println("value:", v.String()) //value: <float64 Value> fmt.Println("type:", v.Type()) // type: float64 fmt.Println("kind is float64:", v.Kind() == reflect.Float64) //kind is float64: true fmt.Println("value:", v.Float()) //value: 3.4 } ``` 由代码17行可以看出:``Value``还可以获取到当前数据值的``Type``。 所以,法则一的图应为: ![](https://i6448038.github.io/img/reflection/law1.1.png) ### Reflection goes from reflection object to interface value.(法则二) 给定的反射对象,可以转化为某种类型的数据对象。即法则一的逆向。 ![](https://i6448038.github.io/img/reflection/law2.png) 注意``Type``是没法逆向转换的,仔细想想也合理,如果可逆类型转化成什么呢?(#^.^#) 承接法则一的代码: ```go package main import ( "fmt" "reflect" ) func main() { var x float64 = 3.4 t := reflect.TypeOf(x) v := reflect.ValueOf(x) ... o := v.Interface().(float64) // 法则2代码 fmt.Println(o) } ``` ### To modify a reflection object, the value must be settable.(法则三) 法则三是说:通过反射对象,可以修改原数据中的内容。 这里说的反射对象,是指``Value``,毕竟``Type``只是表示原数据的类型相关的内容,而``Value``是对应着原数据对象本身。 在目前以上的所有例子中,反射得到的``Value``对象的修改,都是无法直接修改原数据对象的。 ```go package main import ( "fmt" "reflect" ) func main() { var x float64 = 3.4 t := reflect.TypeOf(x) v := reflect.ValueOf(&x) .... o := v.Interface().(float64) fmt.Println(o) v.SetFloat(5.4) //此行会报错 fmt.Println(x) } ``` 这段代码20行会报一个panic ``` reflect: reflect.Value.SetFloat using unaddressable value ``` 这句话的意思并不是地址不可达,而是:对象``v``不可设置(``settable``)。 我们可以通过``Value``结构体的``CanSet()``方法来查看是否可以设置修改新值。 通过以下代码可以知道``CanSet()``返回值是false。 ```go fmt.Println(v.CanSet()) // false ``` ### 如何通过反射对象来修改原数据对象的值呢? 如何才能可以通过反射对象来修改原数据对象的值或者说为什么不能设置呢? 原因简单且纯粹:在Go中,任何函数的参数都是值的拷贝,而非原数据。 反射函数``reflect.ValueOf()``也不例外。我们目前得到的反射对象,都是原对象的copy的反射对象,而非原对象本身,所以不可以修改到原对象;即使可以修改,修改一个传参时候的副本,也毫无意义,不如报错儿。Go反射第三法则中的制定的``settable``属性就由此而来,还延伸出了类似于``CanSet()``的方法。 那如何修改呢? 首先,在Go中要想让函数“有副作用“,传值必须传指针类型的。 ```go ... var x float64 = 3.4 v := reflect.ValueOf(&x) ... ``` 此时还不行,因为这样反射对象对应的是原数据对象的指针类型,必须要拿到当前类型的值类型(*v),如何做? Go提供了另外一个方法``Elem()`` ```go ... var x float64 = 3.4 v := reflect.ValueOf(&x) p := v.Elem() fmt.Println(p.CanSet()) // true p.SetFloat(7.1) fmt.Println(x) // 7.1 ``` 看以上代码,就可以修改原数据了。 ## 反射原理 不难发现,go的反射和interface在结构上是如此的相近!都分为两部分:一部分是``Type``一部分是``value``。 反射会不会是比着interface来实现的? 反射是什么意思?反射的意思是在运行时,能够动态知道给定数据对象的类型和结构,并有机会修改它! 现在一个数据对象,如何判断它是什么结构? 数据interface中保存有结构数据呀,只要想办法拿到该数据对应的内存地址,然后把该数据转成interface,通过查看interface中的类型结构,就可以知道该数据的结构了呀~ 其实以上就是Go反射通俗的原理。 图可以展示为: ![](https://i6448038.github.io/img/reflection/reflect.png) 图中结构中牵扯到的指针,都是``unsafe.Pointer``指针,具体这是个什么指针,后续的文章中会有介绍,在此,你就姑且认为是可以指向Go系统中任意数据的指针就可以。 ### 源码部分 (以下部分可以忽略,是我在查阅代码时候遇到的一点点坑。) 我们来看看具体的源码:源码在”GO SDK/src/refelct“包中,具体主要是包中的"type.go"和"value.go"这两个文件。 可以简单的认为,反射的核心代码,主要是``reflect.ValueOf()``和``reflect.TypeOf()``这两个函数。 先看类型转换:``reflect.TypeOf()`` ```go // TypeOf returns the reflection Type that represents the dynamic type of i. // If i is a nil interface value, TypeOf returns nil. func TypeOf(i interface{}) Type { eface := *(*emptyInterface)(unsafe.Pointer(&i)) return toType(eface.typ) } ``` 其中出现了两种数据结构,一个是``Type``,一个是``emptyInterface`` 分别看看这两者的代码: ``emptyInterface``在 ”GO SDK/src/reflect/value.go“文件中 ```go // emptyInterface is the header for an interface{} value. type emptyInterface struct { typ *rtype word unsafe.Pointer } // nonEmptyInterface is the header for an interface value with methods. type nonEmptyInterface struct { // see ../runtime/iface.go:/Itab itab *struct { ityp *rtype // static interface type typ *rtype // dynamic concrete type hash uint32 // copy of typ.hash _ [4]byte fun [100000]unsafe.Pointer // method table } word unsafe.Pointer } ``` 仔细一看,是空接口和包含方法的interface的两个结构体。且和``eface``和``iface`` 内容字段一致!不是有``eface``和``iface``了吗?这两者有什么不同?? 经过查阅代码,发现: interface源码(位于”Go SDK/src/runtime/runtime2.go“)中的 ``eface``和 ``iface`` 会和 反射源码(位于”GO SDK/src/reflect/value.go“)中的``emptyInterface``和``nonEmptyInterface``保持数据同步! 此外,还有interface源码(位于”Go SDK/src/runtime/type.go“)中的``_type``会和 反射源码(位于”GO SDK/src/reflect/type.go“)中的``rtype``也保持数据同步一致! ## 更多精彩内容,请关注我的微信公众号 ``互联网技术窝`` 或者加微信共同探讨交流: ![](https://i6448038.github.io/img/weichat/qrcode.jpg) 参考文献: Go 1.12.9 反射源码:/src/reflect/ 包 <br/> Go 1.12.9 interface 源码:/src/runtime/runtime2.go 以及其他<br/> https://studygolang.com/articles/2157<br/> https://blog.golang.org/laws-of-reflection<br/> https://blog.csdn.net/u011957758/article/details/81193806<br/> https://draveness.me/golang/docs/part2-foundation/ch04-basic/golang-reflect/#431-<br/> https://mp.weixin.qq.com/s/Hke0mSCEa4ga_GS_LUp78A<br/>

有疑问加站长微信联系(非本文作者))

入群交流(和以上内容无关):加入Go大咖交流群,或添加微信:liuxiaoyan-s 备注:入群;或加QQ群:1006366459

388 次点击  
加入收藏 微博
暂无回复
添加一条新回复 (您需要 登录 后才能回复 没有账号 ?)
  • 请尽量让自己的回复能够对别人有帮助
  • 支持 Markdown 格式, **粗体**、~~删除线~~、`单行代码`
  • 支持 @ 本站用户;支持表情(输入 : 提示),见 Emoji cheat sheet
  • 图片支持拖拽、截图粘贴等方式上传