urllib.parse

架构概述

urllib.parse 是 Python 的 URL 解析和构造库。它提供了一系列函数，用于解析 URL、连接 URL、分割 URL 的各个部分、编码和解码 URL 组件等。这个库在处理网络请求和操作 URL 时非常有用。

基础功能

1. urlparse() - 用于解析 URL。

   • 示例 :

     from urllib.parse import urlparse
     result = urlparse('http://www.example.com/index.html;user?id=5#comment')
     print(result)

     • 输出 :

       ParseResult(scheme='http', netloc='www.example.com', path='/index.html', params='user', query='id=5', fragment='comment')
       

     • scheme: URL的协议，这里是http

     • netloc: 网络位置，通常是域名，这里是www.example.com

     • path: URL的路径，这里是/index.html

     • params: 参数，这里是user

     • query: 查询字符串，这里是id=5

     • fragment: 锚点，也称为片段标识符，这里是comment

2. urlunparse() - 用于根据组件构造 URL。

   • 示例 :

     from urllib.parse import urlunparse
     components = ('http', 'www.example.com', '/index.html', 'user', 'id=5', 'comment')
     print(urlunparse(components))

     • 输出 :

       http://www.example.com/index.html;user?id=5#comment
       

3. urlencode() - 用于将字典转换为 URL 编码的查询字符串。

   • 示例 :

     from urllib.parse import urlencode
     params = {'id': '5', 'name': 'John Doe'}
     print(urlencode(params))

     • 输出 :

       id=5&name=John+Doe
       

进阶功能

1. parse_qs() - 用于将查询字符串解析为字典。

   • 示例 :

     from urllib.parse import parse_qs
     query_string = 'id=5&name=John+Doe'
     print(parse_qs(query_string))

     • 输出 :

       {'id': ['5'], 'name': ['John Doe']}
       

2. quote() 和 unquote() - 用于 URL 编码和解码。

   • 示例 :

     from urllib.parse import quote, unquote
     encoded = quote('Hello World!')
     print(encoded)
     decoded = unquote(encoded)
     print(decoded)

     • 输出 :

       Hello%20World%21
       Hello World!
       

高级教程

• 使用 urllib.parse 处理复杂的 URL，例如包含特殊字符或多种参数的 URL。
• 结合 requests 库使用 urllib.parse 来构建和发送 HTTP 请求。

官方文档链接

• urllib.parse 官方文档
  这个教程涵盖了 urllib.parse 的主要功能。如果你有更具体的问题或需要进一步的示例，请随时告诉我！