04 BeautifulSoup小实例

太过爱你忘了你带给我的痛 2022-06-14 01:37 182阅读 0赞

”’  
Created on 2017年6月6日

@author: v\_huxiaoting  
”’  
import re  
from bs4 import BeautifulSoup  
html\_doc = “””  
The Dormouse’s story

**The Dormouse’s story**

Once upon a time there were three little sisters; and their names were [Elsie][], [Lacie][] and [Tillie][]; and they lived at the bottom of a well.

…

“””  
soup = BeautifulSoup(  
html\_doc,  
“html.parser”  
)  
print(“获取所有的链接”)

links = soup.find\_all(‘a’)

for link in links:  
print(link.name,link\[‘href’\],link.get\_text())

print(“获取Lacie的链接”)

link\_node = soup.find(‘a’,href=”http://example.com/lacie”)  
print(link\_node.name,link\_node\[‘href’\],link\_node.get\_text())

##### 到这里，因为看的是Python2.x的教程，所以，总是出现各种坑。这个坑踩的有点久，是因为之前按照Python2的写法 #####

##### soup = BeautifulSoup( #####

##### html\_doc, #####

##### “html.parser”, #####

##### **from\_encoding=”utf-8”** #####

##### ) #####

##### 一直以为是别的地方出问题，结果是因为这个字符编码。 #####

##### 原因是因为：Python3 缺省的编码是unicode, 再在from\_encoding设置为utf8, 会被忽视掉，导致报错，而影响其他的代码。 #####

#####  #####

##### 使用正则进行匹配 #####

print(‘正则匹配’)  
link\_node1 = soup.find(‘a’,href=re.compile(r”ill”))

##### re.compile() 正则匹配 #####

##### r表示不进行转义 #####

print(link\_node1.name,link\_node\[‘href’\],link\_node1.get\_text())

##### 获取p段落文字 #####

print(“获取p段落文字”)  
p\_node = soup.find(‘p’,class\_=’title’)  
print(p\_node.name,p\_node.get\_text())

[Elsie]: http://example.com/elsie
[Lacie]: http://example.com/lacie
[Tillie]: http://example.com/tillie

发表评论取消回复

表情：

评论列表（有 0 条评论，182人围观）

还没有评论，来说两句吧...

相关阅读

相关 BeautifulSoup 笔记

[使用select方法详解][select] （1）通过标签名查找：soup.select('a') （2）通过类名查找：soup.select('.sister')

清疚/ 2022年12月16日 09:15/ 0 赞/ 183 阅读

相关 BeautifulSoup实战

最近我的博客主要都在自己的网站上写，所以在CSDN上很少更新，希望各位读者光临我的站点[http://a2bgeek.me][http_a2bgeek.me] 最近有个

叁歲伎倆/ 2022年08月26日 12:26/ 0 赞/ 170 阅读

相关 Python爬虫包 BeautifulSoup 学习（五）实例

BeautifulSoup 使用BeautifulSoup抓取豆瓣电影的一些信息。 -- coding: utf-8 -- @Author: Hao

￡神魔★判官ぃ/ 2022年07月13日 04:23/ 0 赞/ 244 阅读

相关 Python爬虫包 BeautifulSoup 学习（三）实例

一步一步构建一个爬虫实例，抓取糗事百科的段子先不用beautifulsoup包来进行解析第一步，访问网址并抓取源码 -- coding: utf-8 --

小灰灰/ 2022年07月13日 03:40/ 0 赞/ 264 阅读

相关 04 - 微信小程序实例开发 - 笑话大全

本文章来自[【知识林】][Link 1] 实例主要功能使用`tabbar`做底部导航菜单使用`onReachBottom`触发底部事件自定义工具

旧城等待，/ 2022年07月11日 00:28/ 0 赞/ 283 阅读

相关 04 BeautifulSoup小实例

”’ Created on 2017年6月6日 @author: v\_huxiaoting ”’ import re from bs4 import Bea

太过爱你忘了你带给我的痛/ 2022年06月14日 01:37/ 0 赞/ 183 阅读

相关 BeautifulSoup 知识小点

序众所周知，requests+BeautifulSoup是编写简单爬虫的利器。同时BeautifulSoup提供了很多的方式去定位元素，通常我们定位一个元素的方式

忘是亡心i/ 2022年06月06日 09:23/ 0 赞/ 138 阅读

相关 Requests，BeautifulSoup，自动登录实例

requests Python标准库中提供了：urllib、urllib2、httplib等模块以供Http请求，但是，它的 API 太渣了。它是为另一个时代、另一个互联

小咪咪/ 2022年05月28日 11:29/ 0 赞/ 242 阅读

相关 BeautifulSoup

beautifulsoup是python的第三方库和xpath作用一样,都是用来解析html数据相比之下,xpath的速度更快一点

浅浅的花香味﹌/ 2022年04月12日 13:00/ 0 赞/ 235 阅读

相关 BeautifulSoup模块

![53246b0864a1ce4047f54282592f22b4.png][] BeautifulSoup库以来解析数据及提取数据，读懂html文件并且从中提取需要的数

谁践踏了优雅/ 2021年07月04日 17:13/ 0 赞/ 455 阅读