Go赋能:HTTP大文件秒传与断点续接

探索Go语言在大文件HTTP传输中的精妙之处。通过流式处理优化内存,利用Range头实现无缝续传。本方案简洁高效,确保大文件传输的稳定性和用户体验。一步步掌握核心技术,提升你的应用性能。

在Go语言中实现HTTP大文件传输与断点续传,可以通过流式处理来避免一次性将整个文件加载到内存中,从而节省内存并提高传输效率。

如何使用Go语言实现HTTP大文件的下载,并支持断点续传功能。

HTTP大文件下载

使用io.Copy实现大文件下载

通过流式处理,将HTTP响应体直接复制到本地文件中,避免将整个文件内容读入内存。

复制代码
package main

import (
	"fmt"
	"io"
	"net/http"
	"os"
)

func main() {
	// 下载文件的URL
	fileUrl := "http://example.com/large_file.zip"
	// 本地保存文件的路径
	localFilePath := "large_file.zip"

	// 发送HTTP GET请求
	resp, err := http.Get(fileUrl)
	if err != nil {
		fmt.Println("Error sending request:", err)
		return
	}
	defer resp.Body.Close()

	// 检查HTTP响应状态码
	if resp.StatusCode != http.StatusOK {
		fmt.Println("Error response status:", resp.Status)
		return
	}

	// 创建本地文件
	out, err := os.Create(localFilePath)
	if err != nil {
		fmt.Println("Error creating file:", err)
		return
	}
	defer out.Close()

	// 使用io.Copy将响应体复制到文件中
	_, err = io.Copy(out, resp.Body)
	if err != nil {
		fmt.Println("Error writing file:", err)
		return
	}

	fmt.Println("File downloaded successfully!")
}

代码说明

  1. 发送HTTP GET请求 :使用http.Get函数发送HTTP GET请求到指定的文件URL。
  2. 检查HTTP响应状态码:确保响应状态码为200(OK)。
  3. 创建本地文件 :使用os.Create函数创建本地文件,用于保存下载的文件。
  4. 使用io.Copy将响应体复制到文件中:将HTTP响应体直接复制到本地文件中,避免将整个文件内容读入内存。

HTTP大文件断点续传

使用Range头实现断点续传

通过设置Range头,实现从指定位置开始下载文件,支持断点续传。

复制代码
package main

import (
	"fmt"
	"io"
	"net/http"
	"os"
	"strconv"
)

func resumeDownload(url string, filePath string) {
	// 获取已下载的文件大小
	fileInfo, err := os.Stat(filePath)
	if err != nil {
		if os.IsNotExist(err) {
			fileInfo = nil
		} else {
			fmt.Println("Error getting file info:", err)
			return
		}
	}

	var start int64
	if fileInfo != nil {
		start = fileInfo.Size()
	}

	req, err := http.NewRequest("GET", url, nil)
	if err != nil {
		fmt.Println("Error creating request:", err)
		return
	}
	if start > 0 {
		req.Header.Set("Range", fmt.Sprintf("bytes=%d-", start))
	}

	client := &http.Client{}
	resp, err := client.Do(req)
	if err != nil {
		fmt.Println("Error making request:", err)
		return
	}
	defer resp.Body.Close()

	if resp.StatusCode != http.StatusPartialContent && resp.StatusCode != http.StatusOK {
		fmt.Println("Server does not support partial content, status code:", resp.StatusCode)
		return
	}

	out, err := os.OpenFile(filePath, os.O_CREATE|os.O_WRONLY|os.O_APPEND, 0644)
	if err != nil {
		fmt.Println("Error opening file:", err)
		return
	}
	defer out.Close()

	_, err = io.Copy(out, resp.Body)
	if err != nil {
		fmt.Println("Error writing to file:", err)
		return
	}

	fmt.Println("Download resumed or completed")
}

func main() {
	url := "http://example.com/large_file.zip"
	filePath := "large_file.zip"

	resumeDownload(url, filePath)
}

代码说明

  1. 获取已下载的文件大小 :使用os.Stat函数获取已下载文件的大小。
  2. 设置Range头 :如果文件已存在,则设置Range头,从已下载的位置开始下载。
  3. 发送HTTP请求 :使用http.NewRequest函数创建HTTP请求,并设置Range头。
  4. 处理响应:检查响应状态码,确保服务器支持部分内容下载(状态码206)。
  5. 追加写入文件 :使用os.OpenFile函数以追加模式打开文件,并将响应体写入文件。

通过流式处理和设置Range头,Go语言可以高效地实现HTTP大文件的下载与断点续传功能。

lcjmSSL支持通配符证书申请,一张证书即可保护主域名及其所有子域名。无论是多级业务系统,还是微服务架构,都能通过通配符证书实现统一管理,大幅降低证书数量与维护成本。

这种方法不仅节省了内存,还提高了传输的可靠性和效率。在实际应用中,可以根据具体需求对代码进行扩展和优化,例如添加进度显示、并发下载等功能。

相关推荐
秋雨梧桐叶落莳3 小时前
【iOS】Block底层详解
macos·ios·cocoa
茶底世界之下4 小时前
舞台灯下的萨克斯:用 Awaking 让铜管从蓝幕前亮起来
ios·app·产品
传奇开心果编程5 小时前
【Flutter踩坑排雷】第28课:平台目录缺失与修复坑|`flutter create` 的“重建”与“覆盖”边界
android·flutter·ios·移动开发·跨平台·dart·声明式ui
3095566665 小时前
股票接口返回 404 与空数组的排查笔记:证书状态与级别参数
java·笔记·python·ios·iphone·股票数据api·股票数据接口
Geek-Chow1 天前
00 Apple Code Signing, In Depth — A Series
ios
传奇开心果编程2 天前
【Flutter踩坑排雷】第25课:ScrollController 误用坑|跳转失效、监听泄漏与“控制器未附加”
android·flutter·ios·移动开发·跨平台·dart·声明式ui
90后的晨仔2 天前
macOS 27 下两个 Xcode 坑:真机 DDI 错配与模拟器 App Translocation
ios
开心猴爷2 天前
iOS 上架 App 流程
后端·ios
奶油话梅糖2 天前
用 iPhone 扫一间房,AI 帮你在浏览器里 1:1 重建它:Wes Bos 的 scan-to-threejs 工作流
人工智能·ios·iphone
茶底世界之下2 天前
阴天窗边的柿子:用 Awaking 让暖色成为主角
ios·app·产品