golang 大文件分割
发布时间:2020-12-16 18:44:08 所属栏目:大数据 来源:网络整理
导读:package mainimport ("fmt""io/ioutil""math""os""strconv")const chunkSize int64 = 4 20func main() {fileInfo,err := os.Stat("test.zip")if err != nil {fmt.Println(err)}num := int(math.Ceil(float64(fileInfo.Size()) / float64(chunkSize)))fi,err
package main import ( "fmt" "io/ioutil" "math" "os" "strconv" ) const chunkSize int64 = 4 << 20 func main() { fileInfo,err := os.Stat("test.zip") if err != nil { fmt.Println(err) } num := int(math.Ceil(float64(fileInfo.Size()) / float64(chunkSize))) fi,err := os.OpenFile("test.zip",os.O_RDONLY,os.ModePerm) if err != nil { fmt.Println(err) return } b := make([]byte,chunkSize) var i int64 = 1 for ; i <= int64(num); i++ { fi.Seek((i-1)*(chunkSize),0) if len(b) > int((fileInfo.Size() - (i-1)*chunkSize)) { b = make([]byte,fileInfo.Size()-(i-1)*chunkSize) } fi.Read(b) f,err := os.OpenFile("./"+strconv.Itoa(int(i))+".db",os.O_CREATE|os.O_WRONLY,os.ModePerm) if err != nil { fmt.Println(err) return } f.Write(b) f.Close() } fi.Close() fii,os.O_CREATE|os.O_WRONLY|os.O_APPEND,os.ModePerm) if err != nil { fmt.Println(err) return } for i := 1; i <= num; i++ { f,os.ModePerm) if err != nil { fmt.Println(err) return } b,err := ioutil.ReadAll(f) if err != nil { fmt.Println(err) return } fii.Write(b) f.Close() } } (编辑:李大同) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |