Golang如何使用io/ioutil高效读取文件_Golang io/ioutil 文件读取技巧解析

ioutil.ReadFile适用于小文件读取，但大文件需用bufio.Scanner逐行处理以节省内存；Go 1.16后推荐使用os.ReadFile替代ioutil.ReadFile，临时文件操作建议迁移到os.MkdirTemp和os.CreateTemp。

在Go语言中，io/ioutil 包曾是文件读取的常用工具，虽然从Go 1.16起已被标记为废弃，推荐使用 io 和 os 包替代，但理解其用法仍有助于维护旧项目。以下是基于 ioutil 的高效文件读取技巧及现代替代方案。

使用 ioutil.ReadFile 直接读取全部内容

ioutil.ReadFile 是最简单的读取整个文件的方法，适合小文件处理。它自动打开、读取并关闭文件，返回字节切片。

示例：

data, err := ioutil.ReadFile("example.txt")
if err != nil {
    log.Fatal(err)
}
fmt.Println(string(data))

优点是代码简洁；缺点是将整个文件加载到内存，大文件可能导致内存溢出。

按行或分块读取避免内存压力

对于大文件，不建议使用 ReadFile。虽然 ioutil 本身不支持流式读取，但可以结合 bufio.Scanner 实现高效逐行处理。

示例：

file, err := os.Open("large.log")
if err != nil {
    log.Fatal(err)
}
defer file.Close()

scanner := bufio.NewScanner(file)
for scanner.Scan() {
    fmt.Println(scanner.Text())
}
if err := scanner.Err(); err != nil {
    log.Fatal(err)
}

这种方式控制内存使用，适合日志分析等场景。

现代替代：使用 os.ReadFile（Go 1.16+）

Go 1.16 引入了 os.ReadFile，功能与 ioutil.ReadFile 完全一致，但属于标准库的延续。

示例：

data, err := os.ReadFile("config.json")
if err != nil {
    log.Fatal(err)
}

这是当前推荐的做法，无需引入额外包，语义清晰。

临时文件处理技巧

ioutil.TempDir 和 ioutil.TempFile 用于创建临时资源，依然实用。

示例创建临时文件：

tmpfile, err := ioutil.TempFile("", "example_*.tmp")
if err != nil {
    log.Fatal(err)
}
defer os.Remove(tmpfile.Name())
defer tmpfile.Close()

content := []byte("临时数据")
tmpfile.Write(content)

注意：新代码可使用 os.MkdirTemp 和 os.CreateTemp 替代。

基本上就这些。虽然 ioutil 方便，但应逐步迁移到 os 和 bufio 等现代接口，以保证代码长期可维护。关键是根据文件大小选择合适方法，避免内存浪费。