使用go語言讀取文件的各種方式整理。
一次性加載到內(nèi)存中
// * 整個(gè)文件讀到內(nèi)存,適用于文件較小的情況
//每次讀取固定字節(jié)
//問題容易出現(xiàn)亂碼,因?yàn)橹形暮椭形姆?hào)不占一個(gè)字符
func readAllIntoMemory(filename string) (content []byte, err error) {
fp, err := os.Open(filename) // 獲取文件指針
if err != nil {
return nil, err
}
defer fp.Close()
fileInfo, err := fp.Stat()
if err != nil {
return nil, err
}
buffer := make([]byte, fileInfo.Size())
_, err = fp.Read(buffer) // 文件內(nèi)容讀取到buffer中
if err != nil {
return nil, err
}
return buffer, nil
}
一次性加載到內(nèi)存中適用于小文件。 如果文件太大, 內(nèi)存緊張的情況下, 可以借助緩沖, 分多次讀取。
分塊讀取
// * 一塊一塊地讀取, 即給一個(gè)緩沖, 分多次讀到緩沖中
//按字節(jié)讀取,將整個(gè)文件讀取到緩沖區(qū)buffer
func readByBlock(filename string) (content []byte, err error) {
fp, err := os.Open(filename) // 獲取文件指針
if err != nil {
return nil, err
}
defer fp.Close()
const bufferSize = 64 // 緩沖大小, 每次讀取64個(gè)字節(jié)
buffer := make([]byte, bufferSize)
for {
// 注意這里要取bytesRead, 否則有問題
bytesRead, err := fp.Read(buffer) // 文件內(nèi)容讀取到buffer中
content = append(content, buffer[:bytesRead]...)
if err != nil {
if err == io.EOF {
err = nil
break
} else {
return nil, err
}
}
}
return
}
有時(shí)我們也需要按行處理
按行讀
// 逐行讀取, 一行是一個(gè)[]byte, 多行就是[][]byte
func readByLine(filename string) (lines [][]byte, err error) {
fp, err := os.Open(filename) // 獲取文件指針
if err != nil {
return nil, err
}
defer fp.Close()
bufReader := bufio.NewReader(fp)
for {
line, _, err := bufReader.ReadLine() // 按行讀
if err != nil {
if err == io.EOF {
err = nil
break
}
} else {
lines = append(lines, line)
}
}
return
}
使用ioutil讀取文件的所有內(nèi)容
func test1() {
bytes,err := ioutil.ReadFile("filetoread.txt")
if err != nil {
log.Fatal(err)
}
fmt.Println("total bytes read:",len(bytes))
fmt.Println("string read:",string(bytes))
}
總結(jié)
以上就是這篇文章的全部?jī)?nèi)容了,希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,謝謝大家對(duì)腳本之家的支持。如果你想了解更多相關(guān)內(nèi)容請(qǐng)查看下面相關(guān)鏈接
您可能感興趣的文章:- golang文件讀取-按指定BUFF大小讀取方式
- golang逐行讀取文件的操作
- Golang 實(shí)現(xiàn)分片讀取http超大文件流和并發(fā)控制
- 淺談Golang是如何讀取文件內(nèi)容的(7種)
- golang 使用 viper 讀取自定義配置文件
- 如何利用Golang解析讀取Mysql備份文件
- Golang 實(shí)現(xiàn)超大文件讀取的兩種方法