BeautifulSoup实现正则表达式的功能，BeautifulSoup.find(html.text, features='lxml') #features: 指定解析器 BeautifulSoup是一个模块，该模块用于接收html或xml字符串，然后将其格式化，之后可以用它提供的方法快速找到需 ...
分类：
其他好文 时间：
2019-06-19 00:40:35
阅读次数：
146
Python 实用爬虫 04 使用 BeautifulSoup 去水印下载 CSDN 博客图片 其实没太大用，就是方便一些，因为现在各个平台之间的图片都不能共享，比如说在 CSDN 不能用简书的图片，在博客园不能用 CSDN 的图片。 当前想到的方案就是：先把 CSDN 上的图片都下载下来，再手动更 ...
分类：
编程语言 时间：
2019-06-16 00:29:15
阅读次数：
139
模块的安装：pipintall模块名称requests：是一个常用的用于http请求的模块，它使用python语言编写，可以方便的对网页进行爬取，是学习python爬虫的较好的http请求模块。BeautifulSoup：是编写python爬虫常用库之一，主要用来解析html标签importjosn:是一种轻量级的数据交换格式，易于人阅读和编写。xwlt:这是一个开发人员用来生成与微软Excel版
分类：
其他好文 时间：
2019-06-15 17:35:48
阅读次数：
101
数据解析方式 - 正则 - xpath - bs4 数据解析的原理： 标签的定位 提取标签中存储的文本数据或者标签属性中存储的数据 正则 bs4解析 解析原理： 实例化一个Beautifulsoup的对象，且将页面源码数据加载到该对象中 使用该对象的相关属性和方法实现标签定位和数据提取 环境的安装： ...
分类：
编程语言 时间：
2019-06-12 19:29:52
阅读次数：
118
今天想把上次参考着网上教程写的scrapy爬虫改写成requests和beautifulsoup的普通爬虫，写着写着发现自己对python的自定义函数还不是太熟悉(自己TCL了。。。。。。。。。流泪)，赶紧菜鸟教程上复习一下，顺便写篇文章。 0x01：关键字 python中，自定义函数使用def关键 ...
分类：
编程语言 时间：
2019-06-07 20:44:55
阅读次数：
101
更简单高效的HTML数据提取-Xpath 本文地址：https://www.jianshu.com/p/90e4b83575e2 XPath 是一门在 XML 文档中查找信息的语言。XPath 用于在 XML 文档中通过元素和属性进行导航。 相比于BeautifulSoup，Xpath在提取数据时会 ...
分类：
编程语言 时间：
2019-06-06 12:05:21
阅读次数：
128
import urllib.parse import urllib.request import requests from bs4 import BeautifulSoup import csv import time import re sd=['名字','地址','价格','月销量','景点概... ...
分类：
其他好文 时间：
2019-06-05 23:54:13
阅读次数：
215
```
# coding=utf-8 from bs4 import BeautifulSoup
import requests
import urllib
x = 1
y = 1 def crawl(url): res = requests.get(url) soup = BeautifulSou... ...
分类：
Web程序 时间：
2019-06-03 22:00:21
阅读次数：
311
这次只演示了，如何在真实项目内用到BeautifulSoup库来解析网页，而新浪的新闻是ajax加载过来的数据，在这里我们只演示解析部分数据（具体反扒机制没做分析）。 代码地址：https://gitee.com/dwyui/BeautifulSoup_xinlang.git。 关于的爬虫的博客已经 ...
分类：
编程语言 时间：
2019-06-02 15:42:31
阅读次数：
147
Beautiful: - 基本使用 from bs4 import BeautifulSoup 解析库: BeautifulSoup4 - 安装: - 解析库安装 pip3 install beautifulsoup4 - 解析器安装 pip3 install lxml - 基本使用 - 导入模块 ...
分类：
其他好文 时间：
2019-06-01 21:09:42
阅读次数：
110
