Go赋能:HTTP大文件秒传与断点续接

探索Go语言在大文件HTTP传输中的精妙之处。通过流式处理优化内存,利用Range头实现无缝续传。本方案简洁高效,确保大文件传输的稳定性和用户体验。一步步掌握核心技术,提升你的应用性能。

在Go语言中实现HTTP大文件传输与断点续传,可以通过流式处理来避免一次性将整个文件加载到内存中,从而节省内存并提高传输效率。

如何使用Go语言实现HTTP大文件的下载,并支持断点续传功能。

HTTP大文件下载

使用io.Copy实现大文件下载

通过流式处理,将HTTP响应体直接复制到本地文件中,避免将整个文件内容读入内存。

复制代码
package main

import (
	"fmt"
	"io"
	"net/http"
	"os"
)

func main() {
	// 下载文件的URL
	fileUrl := "http://example.com/large_file.zip"
	// 本地保存文件的路径
	localFilePath := "large_file.zip"

	// 发送HTTP GET请求
	resp, err := http.Get(fileUrl)
	if err != nil {
		fmt.Println("Error sending request:", err)
		return
	}
	defer resp.Body.Close()

	// 检查HTTP响应状态码
	if resp.StatusCode != http.StatusOK {
		fmt.Println("Error response status:", resp.Status)
		return
	}

	// 创建本地文件
	out, err := os.Create(localFilePath)
	if err != nil {
		fmt.Println("Error creating file:", err)
		return
	}
	defer out.Close()

	// 使用io.Copy将响应体复制到文件中
	_, err = io.Copy(out, resp.Body)
	if err != nil {
		fmt.Println("Error writing file:", err)
		return
	}

	fmt.Println("File downloaded successfully!")
}

代码说明

  1. 发送HTTP GET请求 :使用http.Get函数发送HTTP GET请求到指定的文件URL。
  2. 检查HTTP响应状态码:确保响应状态码为200(OK)。
  3. 创建本地文件 :使用os.Create函数创建本地文件,用于保存下载的文件。
  4. 使用io.Copy将响应体复制到文件中:将HTTP响应体直接复制到本地文件中,避免将整个文件内容读入内存。

HTTP大文件断点续传

使用Range头实现断点续传

通过设置Range头,实现从指定位置开始下载文件,支持断点续传。

复制代码
package main

import (
	"fmt"
	"io"
	"net/http"
	"os"
	"strconv"
)

func resumeDownload(url string, filePath string) {
	// 获取已下载的文件大小
	fileInfo, err := os.Stat(filePath)
	if err != nil {
		if os.IsNotExist(err) {
			fileInfo = nil
		} else {
			fmt.Println("Error getting file info:", err)
			return
		}
	}

	var start int64
	if fileInfo != nil {
		start = fileInfo.Size()
	}

	req, err := http.NewRequest("GET", url, nil)
	if err != nil {
		fmt.Println("Error creating request:", err)
		return
	}
	if start > 0 {
		req.Header.Set("Range", fmt.Sprintf("bytes=%d-", start))
	}

	client := &http.Client{}
	resp, err := client.Do(req)
	if err != nil {
		fmt.Println("Error making request:", err)
		return
	}
	defer resp.Body.Close()

	if resp.StatusCode != http.StatusPartialContent && resp.StatusCode != http.StatusOK {
		fmt.Println("Server does not support partial content, status code:", resp.StatusCode)
		return
	}

	out, err := os.OpenFile(filePath, os.O_CREATE|os.O_WRONLY|os.O_APPEND, 0644)
	if err != nil {
		fmt.Println("Error opening file:", err)
		return
	}
	defer out.Close()

	_, err = io.Copy(out, resp.Body)
	if err != nil {
		fmt.Println("Error writing to file:", err)
		return
	}

	fmt.Println("Download resumed or completed")
}

func main() {
	url := "http://example.com/large_file.zip"
	filePath := "large_file.zip"

	resumeDownload(url, filePath)
}

代码说明

  1. 获取已下载的文件大小 :使用os.Stat函数获取已下载文件的大小。
  2. 设置Range :如果文件已存在,则设置Range头,从已下载的位置开始下载。
  3. 发送HTTP请求 :使用http.NewRequest函数创建HTTP请求,并设置Range头。
  4. 处理响应:检查响应状态码,确保服务器支持部分内容下载(状态码206)。
  5. 追加写入文件 :使用os.OpenFile函数以追加模式打开文件,并将响应体写入文件。

通过流式处理和设置Range头,Go语言可以高效地实现HTTP大文件的下载与断点续传功能。

lcjmSSL支持通配符证书申请,一张证书即可保护主域名及其所有子域名。无论是多级业务系统,还是微服务架构,都能通过通配符证书实现统一管理,大幅降低证书数量与维护成本。

这种方法不仅节省了内存,还提高了传输的可靠性和效率。在实际应用中,可以根据具体需求对代码进行扩展和优化,例如添加进度显示、并发下载等功能。

相关推荐
唐诺21 小时前
【无标题】
ios·属性包装器·wrappers
测试员周周1 天前
【Appium 系列】第14节-断言与验证 — Validator 的设计
android·人工智能·python·功能测试·ios·单元测试·appium
2501_916008891 天前
Mac 上生成 AppStoreInfo.plist 文件,App Store 上架
android·macos·ios·小程序·uni-app·iphone·webview
人月神话-Lee1 天前
【图像处理】高斯模糊——最优雅的模糊算法
图像处理·人工智能·算法·ios·ai编程·swift
@大迁世界1 天前
iPhone 18e,可能不再“低一档”
ios·iphone
Daniel_Coder2 天前
iOS Widget 开发-20:从旧版 API 迁移到 iOS 17+ 现代 Widget
ios·swift·widget·widgetcenter
Daniel_Coder2 天前
iOS Widget 开发-19:Widget 调试与单元测试
ios·单元测试·swift·widget·widgetcenter
我是谁的程序员2 天前
Mac 上生成 AppStoreInfo.plist 文件,App Store 上架
后端·ios