环球微速讯:Python BautifulSoup 节点信息
目录
1、获取节点的内容2、获取节点的名称3、获取节点的属性值3、BS4具体使用1、获取节点的内容
获取节点内容:
如果要获得节点中的文本内容,可以用 string 或 get_text()
string:只能获得节点中的文本内容,如果节点中有子孙节点,string就获取不到内容,返回 Noneget_text() 推荐使用:获取到节点中包含的所有内容包括子孙节点中的内容可以使用get_text() 方法快速得到源文件中的所有文本内容,如 soup.get_text()使用实例:
(相关资料图)
待解析的html文本文件如下:id为al的p标签有子孙节点,id为bl的span标签没有子孙节点
test
使用实例1:对p标签和span标签进行解析,打印里面的内容
from bs4 import BeautifulSoup #使用 lxml 解析器 soup = BeautifulSoup(open("test.html",encoding="utf-8"),"lxml") list = soup.select("#al")[0] print(list.string) print(list.get_text())
执行结果及说明:
用string获取p标签的文本内容,因为p标签有子孙节点,所以返回None;
get_text()获取p标签的文本内容,返回p标签及子孙节点中的文本内容;
None # 用 a1 a2 a3
使用实例2:对span标签进行解析,打印里面的内容
span = soup.select("#bl")[0] print(span.string) print(span.get_text())
执行结果及说明:
string获取span标签的文本内容,因为span标签没有子孙节点,所以可以返回文本内容;
用get_text()获取span标签的文本内容,因为span标签没有子孙节点,所以只返回span标签的文本内容;
span
方唐镜方唐镜
2、获取节点的名称
.name 获取节点的名称
待解析的html文本文件:
test 方唐镜
获取节点的属性实例:
from bs4 import BeautifulSoup #使用 lxml 解析器 soup = BeautifulSoup(open("test.html",encoding="utf-8"),"lxml") # 根据class选择器查找,返回第一个节点 obj = soup.select(".c1")[0] print(obj.name)
执行结果:该节点为span节点
span
3、获取节点的属性值
.attrs 获取获取节点的属性值,并以字典的形式返回
待解析的html文本文件:
test 方唐镜
获取节点的属性实例:
from bs4 import BeautifulSoup #使用 lxml 解析器 soup = BeautifulSoup(open("test.html",encoding="utf-8"),"lxml") # 根据class选择器查找,返回第一个节点 obj = soup.select(".c1")[0] print(obj.attrs)
执行结果:以字典的形式返回
{"id": "span", "class": ["c1"]}
可以通过get方法获得字典里指定属性的属性值:有下面三种方法
# 获取class属性的属性值 #方式一(推荐) print(obj.attrs.get("class")) #方式二 print(obj.get("class")) #方式三 print(obj["class"])
执行结果:
["c1"]
["c1"]
["c1"]
3、BS4具体使用
代码实例:获取所有饮品的名称·
import urllib.request from bs4 import BeautifulSoup from lxml import etree url = "https://www.starbucks.com.cn/menu/" headers = { "user-agent": "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.131 Safari/537.36 SLBrowser/8.0.0.2242 SLBChan/10" } # 定制请求,发送请求并返回响应对象和html文档 request = urllib.request.Request(url=url,headers=headers) response = urllib.request.urlopen(request) content = response.read().decode("utf-8") # 使用 lxml 解析器 soup = BeautifulSoup(content,"lxml") # 检索html文档,返回列表形式 name_list = soup.select("ul[class="grid padded-3 product"] strong") # 遍历打印 for name in name_list: print(name.string)
执行结果:
到此这篇关于Python BautifulSoup 节点信息的文章就介绍到这了,更多相关Python BautifulSoup 内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!
X 关闭
X 关闭
- 1联想拯救者Y70发布最新预告:售价2970元起 迄今最便宜的骁龙8+旗舰
- 2亚马逊开始大规模推广掌纹支付技术 顾客可使用“挥手付”结账
- 3现代和起亚上半年出口20万辆新能源汽车同比增长30.6%
- 4如何让居民5分钟使用到各种设施?沙特“线性城市”来了
- 5AMD实现连续8个季度的增长 季度营收首次突破60亿美元利润更是翻倍
- 6转转集团发布2022年二季度手机行情报告:二手市场“飘香”
- 7充电宝100Wh等于多少毫安?铁路旅客禁止、限制携带和托运物品目录
- 8好消息!京东与腾讯续签三年战略合作协议 加强技术创新与供应链服务
- 9名创优品拟通过香港IPO全球发售4100万股 全球发售所得款项有什么用处?
- 10亚马逊云科技成立量子网络中心致力解决量子计算领域的挑战