golang 大文件分割
发布时间:2020-12-16 18:44:08 所属栏目:大数据 来源:网络整理
导读:package mainimport ("fmt""io/ioutil""math""os""strconv")const chunkSize int64 = 4 20func main() {fileInfo,err := os.Stat("test.zip")if err != nil {fmt.Println(err)}num := int(math.Ceil(float64(fileInfo.Size()) / float64(chunkSize)))fi,err
package main
import (
"fmt"
"io/ioutil"
"math"
"os"
"strconv"
)
const chunkSize int64 = 4 << 20
func main() {
fileInfo,err := os.Stat("test.zip")
if err != nil {
fmt.Println(err)
}
num := int(math.Ceil(float64(fileInfo.Size()) / float64(chunkSize)))
fi,err := os.OpenFile("test.zip",os.O_RDONLY,os.ModePerm)
if err != nil {
fmt.Println(err)
return
}
b := make([]byte,chunkSize)
var i int64 = 1
for ; i <= int64(num); i++ {
fi.Seek((i-1)*(chunkSize),0)
if len(b) > int((fileInfo.Size() - (i-1)*chunkSize)) {
b = make([]byte,fileInfo.Size()-(i-1)*chunkSize)
}
fi.Read(b)
f,err := os.OpenFile("./"+strconv.Itoa(int(i))+".db",os.O_CREATE|os.O_WRONLY,os.ModePerm)
if err != nil {
fmt.Println(err)
return
}
f.Write(b)
f.Close()
}
fi.Close()
fii,os.O_CREATE|os.O_WRONLY|os.O_APPEND,os.ModePerm)
if err != nil {
fmt.Println(err)
return
}
for i := 1; i <= num; i++ {
f,os.ModePerm)
if err != nil {
fmt.Println(err)
return
}
b,err := ioutil.ReadAll(f)
if err != nil {
fmt.Println(err)
return
}
fii.Write(b)
f.Close()
}
} (编辑:李大同) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |
