爬虫常用库 requests、selenium、puppeteer，beautifulsoup4、pyquery、pymysql、pymongo、redis、lxml和scrapy框架 其中发起请求课可以使用requests和scrapy 解析内容可以用 beautifulsoup4,lxml,py ...
分类：
其他好文 时间：
2020-02-25 10:03:07
阅读次数：
84
源代码： # coding=utf-8 import requests from lxml import etree class ChaxunSpdier: def __init__(self): self.start_url = 'http://111.40.232.237:9000/eoms35 ...
分类：
其他好文 时间：
2020-02-24 20:14:37
阅读次数：
105
这周主要学习了有关python爬虫知识： 一开始的爬虫三大库：Requests,BeautifulSoup,Lxml(Lxml比BeautifulSoup解析快) Xpath语法； 解析json数据；https://www.cnblogs.com/sengzhao666/p/12335379.htm ...
分类：
其他好文 时间：
2020-02-24 13:01:07
阅读次数：
67
一：lxml解析错误 1.报错信息如下: 错误原因: 原因分析: 解决方案 ...
分类：
其他好文 时间：
2020-02-23 16:36:50
阅读次数：
98
from lxml import etree import requests from urllib import request import time import os from queue import Queue import threading import re from multip ...
分类：
编程语言 时间：
2020-02-23 16:15:47
阅读次数：
147
这一周我学习了python的一些基本语法和函数 以及如何从不同类型的网站爬虫 爬取了丁香园-的疫情数据还有拉勾网，猫眼的一些信息 学到两种方法，一种是xpath方法，一种是正则表达式 xpath import requests from lxml import etree import xlwt u ...
分类：
其他好文 时间：
2020-02-22 15:36:27
阅读次数：
90
Python中常用的html数据抽取方法有正则、XPath和BeautifulSoup这三种。其中，最常用的XPath库是lxml。今天再介绍一个库SimplifiedDoc，一起比较一下他们的优劣。 1、安装 |名称|安装方法|包大小|说明| | | | | | |正则|不需安装（内置）||| | ...
分类：
Web程序 时间：
2020-02-16 12:43:19
阅读次数：
85
xPath：一种HTML和XML的查询语言，他能在XML和HTML的树状结构中寻找节点 安装xPath： pip方法： pip install lxml win+R：cmd 打开命令控制台： 此时可以看到xml已经安装完成 HTML： 一种网页的标准、规范。编写网页文档的主要语言。超文本链接【可以跳 ...
分类：
Web程序 时间：
2020-02-15 23:19:16
阅读次数：
104
pyquery允许对xml文档进行jquery查询。该API尽可能类似于jquery。pyquery使用lxml进行快速的xml和html操作，能够以jQuery的语法来操作解析 HTML 文档。 实例：爬取疫情报告https://voice.baidu.com/act/newpneumonia/n ...
分类：
Web程序 时间：
2020-02-14 00:36:09
阅读次数：
130
用xml代替lxml,Python3.7中已经没有etree这个模块了 import xml.etree.ElementTree as etree from lxml import etree 这种方法已经不行了 版本不匹配 ...
分类：
编程语言 时间：
2020-02-13 12:59:39
阅读次数：
250
