go语言读取文件很慢 go内存缓存

go语言 ioutil.ReadFile 与ioutil.ReadAll差别

当读取91.2 MB文件时，read1耗时43ms，read2耗时99ms。

查看源码：

读取文件主要是通过 Read(p []byte) (n int, err error) ：

官方文档中关于该接口方法的说明：

结论：

ReadFile(filename string)方法之所以速度快的原因就是先计算出file文件的size，在初始化对应size大小的buff，传入ReadRead(p []byte) 来读取字节流

第一个问题，打开文件应添加"|os.O_WRONLY"

file, err := os.OpenFile("data.dat",os.O_CREATE|os.O_APPEND|os.O_WRONLY,0777)

第二个问题，将Count方法中的 "ch-i"放到方法的最后一行就可以了。

因为一旦“ch-i"执行了，main方法中的 "-ch"就会执行通过当所有的"-ch"执行完后程序就结束了。但这时Count的线程方法还来不及执行完（打开文件的速度相对较慢），所以仅仅执行一次文件操作就结束了

文件分类：文本文件和二进制文件

文本文件可读性好，占用的数据空间大

二进制文件，可读性差，占用的数据空间小

文件存取方式：随机存取和顺序存放

随机存取：操作速度慢，对磁盘的消耗大

顺序存放：操作数据块，对磁盘的消耗小

初级方法

高级方法

在程序和文件之间，添加一个缓冲区，每次程序读取文件内容的时候，先去缓冲区查看，如果需要的内容，直接获取，如果没有再去文件中获取

由于缓冲是在内存当中的，和程序的交互返回速度会非常快，这样可以大大提高程序的性能和速度

缺点：有的数据是只在缓冲中存储的，如果在缓冲释放之前，没有将数据实例化落盘，会导致数据的丢失

按行操作文件对象

将之前的file方法封装起来，可以更加方便的使用

使用gzip.NewReader(文件句柄)，来操作压缩文件

示例： file,err := os.OpenFile("main.go", os.O_WRONLY|os.O_WRONLY, 0666)

三个参数，

文件操作方法，需要注意不能冲突

操作完成后，当前目录出现一个text.txt 文件，内容是：hello world,test

这里可以可以考虑使用buffio来实现