golang []byte转*file_golang-几种读文件方式的比较

本文探讨了Go语言中三种常见的读文件方法:使用Read配合缓冲区、使用bufio库和ioutil库。通过读取不同大小的文件进行性能测试,结果显示ioutil包提供的方法在效率上显著高于其他两种。文章深入解析了ioutil包的实现原理。
摘要由CSDN通过智能技术生成
8ec776e0334de4da5fe3dbc7ad3f362f.png

GoLang提供了很多读文件的方式,一般来说常用的有三种。使用Read加上buffer,使用bufio库和ioutil 库。

package mainimport(    "fmt"    "os"    "flag"    "io"    "io/ioutil"    "bufio"    "time")// 使用os包,按照固定长度读取文件内容func read1(path string)string{    fi,err := os.Open(path)    if err != nil{        panic(err)    }    defer fi.Close()    chunks := make([]byte,1024,1024)    buf := make([]byte,1024)    for{        n,err := fi.Read(buf)        if err != nil && err != io.EOF{panic(err)}        if 0 ==n {break}        chunks=append(chunks,buf[:n]...)        // fmt.Println(string(buf[:n]))    }    return string(chunks)}// 使用os包+bufio包读取文件func read2(path string)string{    fi,err := os.Open(path)    if err != nil{panic(err)}    defer fi.Close()    r := bufio.NewReader(fi)        chunks := make([]byte,1024,1024)         buf := make([]byte,1024)    for{        n,err := r.Read(buf)        if err != nil && err != io.EOF{panic(err)}        if 0 ==n {break}        chunks=append(chunks,buf[:n]...)        // fmt.Println(string(buf[:n]))    }    return string(chunks)}// 使用os包+ioutil包读文件func read3(path string)string{    fi,err := os.Open(path)    if err != nil{panic(err)}    defer fi.Close()    fd,err := ioutil.ReadAll(fi)    // fmt.Println(string(fd))    return string(fd)}func main(){       flag.Parse()    file := flag.Arg(0)    f,err := ioutil.ReadFile(file)    if err != nil{        fmt.Printf("%s",err)        panic(err)    }    fmt.Println(string(f))    start := time.Now()    read1(file)    t1 := time.Now()    fmt.Printf("Cost time %v",t1.Sub(start))    read2(file)    t2 := time.Now()    fmt.Printf("Cost time %v",t2.Sub(t1))    read3(file)    t3 := time.Now()    fmt.Printf("Cost time %v",t3.Sub(t2))}

运行命令go run read.go filename, 制定需要读取的文件就可以了。这里我比较了读取13.7MB的日志文件,三种方式分别消耗的时间是:

Cost time 105.006ms  Cost time 68.0039ms  Cost time 31.0018ms  

读取29.3MB的媒体文件:

Cost time 390.0223ms  Cost time 194.0111ms  Cost time 83.0048ms  

读取302MB的媒体文件

Cost time 40.8043338s  Cost time 1m5.0407201s  Cost time 8.8155043s  

这个差距就很明显了,ioutil提供的方法效率就是高。下面我们从代码层面分析一下ioutil包

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值