原文网址：https://blog.csdn.net/u010244522/article/details/79627073 从网页获取HTML数据后，获取对应标签、属性的值 取值方法主要有以下几种： 1.通过标签名（tag）获取: tag.name tag对应的type是<class 'bs4.e ...
分类：
其他好文 时间：
2018-12-01 22:13:35
阅读次数：
438
1、 爬虫 1、 用urllib.request库请求一个url的内容。 2、 用 beautifulsoup解析request库请求得到的内容。 3、 在网页上右键 检查，阅读html代码，归纳出想爬到信息属于html树形结构的哪一部分。 4、 用beautifulsoup的next_elemen ...
分类：
其他好文 时间：
2018-12-01 00:23:31
阅读次数：
608
文章解析： 1.正则表达式解析 2.beautifulsoup，BeautifulSoup是一个复杂的树形结构，她的每一个节点都是一个python对象，获取网页的内容就是一个提取对象内容的过程，它的提取方法可以归类为三种，1）遍历文档树 2）搜索文档树 3）css选择器 https://beauti ...
分类：
编程语言 时间：
2018-11-30 11:34:18
阅读次数：
214
也不知道这算不算爬虫,哈哈,主要是理解BeautifulSoup的用法。
分类：
其他好文 时间：
2018-11-29 15:37:25
阅读次数：
388
'''强大又灵活的网页解析库。如果你觉得正则写起来太麻烦，又觉得BeautifulSoup语法太难记，如果你熟悉jQuery的语法，那么PyQuery就是你的绝佳选择。'''from pyquery import PyQuery as pq'''初始化'''#字符串初始化html = '''<div ...
分类：
其他好文 时间：
2018-11-27 22:17:45
阅读次数：
297
方法 1.sp.title 返回网页标题 2.sp.text 返回去除所有HTML标签后的网页内容 3.sp.find(name=None, attrs={}, recursive=True, text=None, **kwargs) 该函数返回值为字符串 第一个参数是标签名字，第二个是个网页属性的 ...
分类：
编程语言 时间：
2018-11-25 01:20:56
阅读次数：
187
BeautifulSoup将复杂的HTML文档转换成一个复杂的树形结构.每个节点都是Python对象.所有对象可以归纳为四种:Tag , NavigableString , BeautifulSoup , Comment . 1.Tag对象最重要的属性:Name:标签的名字；attributes:属 ...
分类：
其他好文 时间：
2018-11-24 14:42:31
阅读次数：
403
BeautifulSoup BeautifulSoup是一个模块，该模块用于接收一个HTML或XML字符串，然后将其进行格式化，之后遍可以使用他提供的方法进行快速查找指定元素，从而使得在HTML或XML中查找指定元素变得简单。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 ...
分类：
其他好文 时间：
2018-11-23 22:54:32
阅读次数：
196
beautifulsoup解析 python独有 1.导包 2.创建Beautiful对象： 如果html文档来源于本地：Beautiful('open('本地html文件)',lxml) 如果html文档来源于网络：Beautiful（'网络请求到的页面数据','lxml'） 3.使用方法和属性： ...
分类：
其他好文 时间：
2018-11-22 17:18:46
阅读次数：
201
BeautifulSoup是python的html解析库，处理html非常方便 BeautifulSoup 安装 pip install beautifulsoup4 BeautifulSoup 配合的解析器 python 标准库解析器不需要第三方库，处理效率一般，lxml比较快，需要C语言库支持， ...
分类：
编程语言 时间：
2018-11-22 17:16:49
阅读次数：
295
