Go赋能:HTTP大文件秒传与断点续接

探索Go语言在大文件HTTP传输中的精妙之处。通过流式处理优化内存,利用Range头实现无缝续传。本方案简洁高效,确保大文件传输的稳定性和用户体验。一步步掌握核心技术,提升你的应用性能。

在Go语言中实现HTTP大文件传输与断点续传,可以通过流式处理来避免一次性将整个文件加载到内存中,从而节省内存并提高传输效率。

如何使用Go语言实现HTTP大文件的下载,并支持断点续传功能。

HTTP大文件下载

使用io.Copy实现大文件下载

通过流式处理,将HTTP响应体直接复制到本地文件中,避免将整个文件内容读入内存。

复制代码
package main

import (
	"fmt"
	"io"
	"net/http"
	"os"
)

func main() {
	// 下载文件的URL
	fileUrl := "http://example.com/large_file.zip"
	// 本地保存文件的路径
	localFilePath := "large_file.zip"

	// 发送HTTP GET请求
	resp, err := http.Get(fileUrl)
	if err != nil {
		fmt.Println("Error sending request:", err)
		return
	}
	defer resp.Body.Close()

	// 检查HTTP响应状态码
	if resp.StatusCode != http.StatusOK {
		fmt.Println("Error response status:", resp.Status)
		return
	}

	// 创建本地文件
	out, err := os.Create(localFilePath)
	if err != nil {
		fmt.Println("Error creating file:", err)
		return
	}
	defer out.Close()

	// 使用io.Copy将响应体复制到文件中
	_, err = io.Copy(out, resp.Body)
	if err != nil {
		fmt.Println("Error writing file:", err)
		return
	}

	fmt.Println("File downloaded successfully!")
}

代码说明

  1. 发送HTTP GET请求 :使用http.Get函数发送HTTP GET请求到指定的文件URL。
  2. 检查HTTP响应状态码:确保响应状态码为200(OK)。
  3. 创建本地文件 :使用os.Create函数创建本地文件,用于保存下载的文件。
  4. 使用io.Copy将响应体复制到文件中:将HTTP响应体直接复制到本地文件中,避免将整个文件内容读入内存。

HTTP大文件断点续传

使用Range头实现断点续传

通过设置Range头,实现从指定位置开始下载文件,支持断点续传。

复制代码
package main

import (
	"fmt"
	"io"
	"net/http"
	"os"
	"strconv"
)

func resumeDownload(url string, filePath string) {
	// 获取已下载的文件大小
	fileInfo, err := os.Stat(filePath)
	if err != nil {
		if os.IsNotExist(err) {
			fileInfo = nil
		} else {
			fmt.Println("Error getting file info:", err)
			return
		}
	}

	var start int64
	if fileInfo != nil {
		start = fileInfo.Size()
	}

	req, err := http.NewRequest("GET", url, nil)
	if err != nil {
		fmt.Println("Error creating request:", err)
		return
	}
	if start > 0 {
		req.Header.Set("Range", fmt.Sprintf("bytes=%d-", start))
	}

	client := &http.Client{}
	resp, err := client.Do(req)
	if err != nil {
		fmt.Println("Error making request:", err)
		return
	}
	defer resp.Body.Close()

	if resp.StatusCode != http.StatusPartialContent && resp.StatusCode != http.StatusOK {
		fmt.Println("Server does not support partial content, status code:", resp.StatusCode)
		return
	}

	out, err := os.OpenFile(filePath, os.O_CREATE|os.O_WRONLY|os.O_APPEND, 0644)
	if err != nil {
		fmt.Println("Error opening file:", err)
		return
	}
	defer out.Close()

	_, err = io.Copy(out, resp.Body)
	if err != nil {
		fmt.Println("Error writing to file:", err)
		return
	}

	fmt.Println("Download resumed or completed")
}

func main() {
	url := "http://example.com/large_file.zip"
	filePath := "large_file.zip"

	resumeDownload(url, filePath)
}

代码说明

  1. 获取已下载的文件大小 :使用os.Stat函数获取已下载文件的大小。
  2. 设置Range :如果文件已存在,则设置Range头,从已下载的位置开始下载。
  3. 发送HTTP请求 :使用http.NewRequest函数创建HTTP请求,并设置Range头。
  4. 处理响应:检查响应状态码,确保服务器支持部分内容下载(状态码206)。
  5. 追加写入文件 :使用os.OpenFile函数以追加模式打开文件,并将响应体写入文件。

通过流式处理和设置Range头,Go语言可以高效地实现HTTP大文件的下载与断点续传功能。

lcjmSSL支持通配符证书申请,一张证书即可保护主域名及其所有子域名。无论是多级业务系统,还是微服务架构,都能通过通配符证书实现统一管理,大幅降低证书数量与维护成本。

这种方法不仅节省了内存,还提高了传输的可靠性和效率。在实际应用中,可以根据具体需求对代码进行扩展和优化,例如添加进度显示、并发下载等功能。

相关推荐
沐风___11 小时前
iOS 崩溃收集实战:从「只看到次数、看不到原因」到 Sentry 完整集成
ios·sentry
listening77712 小时前
HarmonyOS 6.1 跨端实战:用ArkUI-X把电商App同时跑在Android/iOS上
android·ios·harmonyos
Tyler_113 小时前
iOS PlayWright mcp server
前端·ios·ai编程
2501_916008892 天前
iOS 证书管理最佳实践 从创建到续期的完整指南
android·ios·小程序·https·uni-app·iphone·webview
黑科技iOS上架2 天前
ReactNative入门介绍
经验分享·ios
智塑未来2 天前
鸿蒙系统对比安卓、iOS,核心优势是什么?
android·ios·harmonyos
初雪云2 天前
iOS 上架入门:证书、描述文件、IPA 上传到底是什么关系?
android·ios·自动化·产品经理·iphone
狂热开发者2 天前
用 Typeoff 把会后口述整理成 Markdown 决策记录
人工智能·windows·macos·ios·安卓
2501_916007473 天前
iPad 怎么抓包 从代理模式到暴力抓包的操作方法
android·ios·小程序·uni-app·代理模式·iphone·ipad
2501_915918413 天前
PerfDog 太贵?iOS 性能监控工具的功能对比与选择
android·ios·小程序·https·uni-app·iphone·webview