[Web自动化] BeautifulSoup导航文档树

7.4 BeautifulSoup导航文档树

7.4.1 子节点和子孙节点

7.4.1.1 子节点
  • .contents :这是一个列表,包含了Tag对象的所有子节点。列表的第一个元素是Tag的第一个子节点,最后一个元素是最后一个子节点。如果Tag不包含任何内容,则.contents是一个空列表。
  • .children :这是一个生成器,用于迭代Tag的所有子节点。与.contents不同,.children不会一次性加载所有子节点到内存中,因此适用于处理大型文档。

示例

python 复制代码
from bs4 import BeautifulSoup

html_doc = "<p>First paragraph.<a href='http://example.com'>Link</a></p>"
soup = BeautifulSoup(html_doc, 'html.parser')

p_tag = soup.p
print(p_tag.contents)# 输出子节点的列表,如:['First paragraph.', <a href="http://example.com">Link</a>]

for child in p_tag.children:
 print(child)# 迭代输出每个子节点
7.4.1.2 子孙节点
  • .descendants:这是一个生成器,用于迭代Tag的所有子孙节点,即直接子节点、子节点的子节点等,直到最底层的节点。

示例

python 复制代码
for descendant in p_tag.descendants:
 print(descendant)# 迭代输出所有子孙节点,包括文本节点和标签

7.4.2 父节点和祖先节点

  • .parent :返回当前节点的直接父节点。如果节点是顶层节点(如整个文档的根节点),则返回None
  • .parents:这是一个生成器,返回当前节点的所有祖先节点,从直接父节点开始,一直到文档的根节点。

示例

python 复制代码
a_tag = soup.a
print(a_tag.parent)# 输出:<p>First paragraph.<a href="http://example.com">Link</a></p>

for parent in a_tag.parents:
 print(parent)# 迭代输出所有祖先节点

7.4.3 兄弟节点

  • .next_sibling.previous_sibling :分别返回当前节点的下一个和上一个兄弟节点。如果节点是最后一个或第一个兄弟节点,则返回None
  • .next_siblings.previous_siblings:这是两个生成器,分别迭代当前节点之后和之前的所有兄弟节点。

示例

python 复制代码
for sibling in a_tag.next_siblings:
 print(sibling)# 迭代输出<a>标签之后的所有兄弟节点(在这个例子中,可能没有输出,因为<a>是最后一个子节点)
# 假设我们有一个更复杂的结构来演示.previous_sibling
html_doc = "<p>Text before <a href='http://example.com'>Link</a> Text after</p>"
soup = BeautifulSoup(html_doc, 'html.parser')
a_tag = soup.a
print(a_tag.previous_sibling)# 输出:Text before (注意,这可能包括额外的空格或换行符,具体取决于HTML文档的格式)

# 对于.previous_siblings,这里没有直接的前一个兄弟节点可以展示,但如果有,可以类似地迭代它们

请注意,兄弟节点之间的空格、换行符等也可能被视为NavigableString对象,因此在遍历兄弟节点时可能会遇到它们。此外,实际的输出可能取决于HTML文档的格式和解析器的实现细节。

相关推荐
To_OC5 小时前
面试被问了三回三栏布局,这次我终于把 BFC 那层窗户纸捅破了
前端·css·面试
To_OC5 小时前
啃完 TS 工具类型我发现:Pick 和 Omit 原来就是一层窗户纸
前端·面试·typescript
聪明蛋子哟6 小时前
Stagehand v3多语言SDK:Python/Go/Rust/Java下的浏览器自动化统一方案
python·golang·rust
今天AI了吗7 小时前
Python 基础语法(一):常量、变量、输入输出与运算符
开发语言·数据库·人工智能·python·sql·深度学习·机器学习
风月说与山鬼7 小时前
三、大括号语法
前端·react.js
卷无止境7 小时前
Windows 上丝滑开发 Python,并稳定构建 Docker 镜像
后端·python·docker
kyriewen7 小时前
我把最常踩的8个CORS跨域报错整理了一遍——第8个去年还不存在
前端·javascript
TELL5217 小时前
selenium webdriver 第二次初始化的异常
开发语言·python
Csvn7 小时前
🐍 Day 4: Python 控制流 — 条件、循环与推导式的艺术
后端·python