美文网首页
golang读写文件

golang读写文件

作者: 柯蓝_e007 | 来源:发表于2019-05-07 09:02 被阅读0次

抗压测试的时候多线程需要使用一个文件的内容频繁发送,所以想预处理文件内容到内存
,分段发送,
1.读取文件内容到内存

type Chunk struct{
    data []byte
}

func prepareChucks(path string)  {

    fi, err := os.Open(path)
    if err != nil {
        panic(err)
    }
    defer fi.Close()

    for {

        buf := make([]byte, 4096) //每次需要再for循环里面重新make,踩坑
        n, err := fi.Read(buf)
        if err != nil && err != io.EOF {
            panic(err)
        }
        if 0 == n {
            break
        }
        chunckData := Chunk{buf[:n]}
        chuckList.PushBack(chunckData)
    }

}

2.从内存取出消费(只是举例子,这里是重新把内存的分段数据又存储到文件,通过与输入文件二进制比较,可作为验证内存中数据是否正确)

func writeFile(path string){


    f, err := os.Create(path )
    defer f.Close()

    for e := chuckList.Front(); e != nil; e = e.Next() {

        chuckData := e.Value.(Chunk)

        _ ,err = f.Write(chuckData.data)

        if(err != nil){
            log.Println("writeFile error ..err =",err)
            return
        }
    }
}

3 使用如下

var chuckList  *list.List

func main() {

    chuckList = list.New()

    prepareChucks("in file path")

    writeFile("out file path")

}

相关文章

  • Golang 文件操作

    参考Golang文件操作整理golang中的文件读写 一、API 参考Go语言学习笔记(五)文件操作 1.os.F...

  • Golang文件读写

    参考 Go实战--golang中读写文件的几种方式 读文件 读取的文件放在file/test:也就是file包下的...

  • Golang文件读写

    创建文件 通过os包的Create、NewFile方法创建 func Create(name string)(fi...

  • golang 文件读写

    读文件 ReadFile直接读取 ReadAll 读取文件 Read方法读取 使用os.Open和bufio.Re...

  • golang读写文件

    抗压测试的时候多线程需要使用一个文件的内容频繁发送,所以想预处理文件内容到内存,分段发送,1.读取文件内容到内存 ...

  • golang 读写二进制文件(2)

    golang 使用encoding/gob包读写二进制文件 上篇介绍了使用"encoding/binary"包读写...

  • 详解golang中bufio包的实现原理

    最近用golang写了一个处理文件的脚本,由于其中涉及到了文件读写,开始使用golang中的 io 包,后来发现g...

  • golang 读取文件的四种方式

    参考 Go实战--golang中读写文件的几种方式 读文件 读取的文件放在file/test:也就是file包下的...

  • golang追加内容到文件末尾

    golang读写文件,网上很多教程了但是今天有个需求,想要把内容追加写到文件末尾google了好久,没有查到研究了...

  • golang中bufio包

    一、介绍go标准库中的bufio最近用golang写了一个处理文件的脚本,由于其中涉及到了文件读写,开始使用gol...

网友评论

      本文标题:golang读写文件

      本文链接:https://www.haomeiwen.com/subject/fwysoqtx.html