Go圣经-学习笔记入门bufio

bufio数据读取注意项

在go圣经第一章节 bufio-缓存IO，有个例子，不读源码不容易理解。

DEMO 1

func main(){
    reader :=bufio.NewReader(
    strings.NewReader(""http://studygolang.com. \nIt is the home of gophers, yes or no ?"),
    )
    
    line, _ := reader.ReadSlice('\n')
    fmt.Printf("line=%s", line) // 注意点：bufio.ReadSlice会把'\n'读取进来， 所以自带换行
    n, _ := reader.ReadSlice('\n')
    fmt.Printf("the line:%s\n", line) // 猜猜line返回结果
    fmt.Println(string(n)) // 没有读取到换行符
    return
}

打印结果：

the line:http://studygolang.com. 
the line:It is the home of gophers
It is the home of gophers, yes or no ?

DEMO 2

type Reader struct {
     buf          []byte
     rd           io.Reader // reader provided by the client
     r, w         int       // buf read and write positions
     err          error
     lastByte     int
     lastRuneSize int
 }
 
func main(){
    reader :=bufio.NewReader(
    strings.NewReader(""http://studygolang.com. \nIt is the home of gophers, yes or no ?\n"),
    ) // 多加一个`\n`
    
    line, _ := reader.ReadSlice('\n')
    fmt.Printf("line=%s", line) // 注意点：bufio.ReadSlice会把'\n'读取进来， 所以自带换行
    n, _ := reader.ReadSlice('\n')
    fmt.Printf("the line:%s\n", line) // 猜猜line返回结果
    fmt.Println(string(n)) // 读取到换行符
    return
}

打印结果:

the line:http://studygolang.com. 
the line:http://studygolang.com. 

It is the home of gophers, yes or no ?

其输出结果对比，大跌眼镜，居然有无\n结果，差距这么大。

深入分析源码：

func (b *Reader) ReadSlice(delim byte) (line []byte, err error){
    for {
        if i:=bytes.IndexBytes(b.buf[b.r:b.w], delim); i>= 0{
            line = b.buf[b.r : b.r+i+1]
            b.r =i+1
            break
        }
        ...
        b.fill() // 如果buf已经读完，需要再次从b.rd中读取新的数据
    }
}

func (b *Reader) fill() {
    if b.r > 0 {
        copy(b.buf, b.buf[b.r: b:w])
        b.w -=b.r
        b.r=0
    }
    
    ...
}

以上为代码关键点，我们现在分别讨论：

• 对于第一个DEMO，第二个line返回的是It is the home of gophers, yes or no ?，期望是返回 http://studygolang.com..
  • 分析如下：因为第二次读取reader.ReadSlice时，bytes.IndexByte没有发现第二个\n, 所以返回的索引i小于0， 则会执行fill方法，则时因为第一次读取了数据，所以b.r肯定大于0，所以执行了copy操作，buf底层数组发生了变化，变成了新写入的b.buf[b.r: b.w]值，但是要注意，line的长度和容量是不变的，所以会存在截断或者不足的情况。
• 对于第二个DEMO，希望和期望的值是相同的
  • 分析如下：因为第二次读取reader.ReadSlice时，bytes.IndexByte可以发现第二个\n， 则直接返回，写没有修改buf底层数据，也就使得line底层数组没有发生变化。

结论：所以我们在使用标准库时，不是很明白的方法要搞清楚才能好一些，不然容易犯错误。以下是规避ReadSlice错误的方法

func (b *Reader) ReadString(delim byte) (string, error) // 安全
func (b *Reader) ReadBytes(delim byte) ([]byte, error) // 安全， 因为返回的[]byte是用make新分配内存空间

有疑问加站长微信联系（非本文作者）