什么是PyQuery PyQuery是一个类似于jQuery的解析网页工具，使用lxml操作xml和html文档，它的语法和jQuery很像。和XPATH，Beautiful Soup比起来，PyQuery更加灵活，提供增加节点的class信息，移除某个节点，提取文本信息等功能。 初始化PyQuer ...
分类：
其他好文 时间：
2018-12-03 10:33:30
阅读次数：
233
'''强大又灵活的网页解析库。如果你觉得正则写起来太麻烦，又觉得BeautifulSoup语法太难记，如果你熟悉jQuery的语法，那么PyQuery就是你的绝佳选择。'''from pyquery import PyQuery as pq'''初始化'''#字符串初始化html = '''<div ...
分类：
其他好文 时间：
2018-11-27 22:17:45
阅读次数：
297
import requestsfrom urllib.parse import urlencodefrom pyquery import PyQuery as pq#from pymongo import MongoClientbase_url = 'https://m.weibo.cn/api/c ...
分类：
其他好文 时间：
2018-11-22 11:43:07
阅读次数：
503
一、爬虫的步骤 1.发起请求，模拟浏览器发送一个http请求 2.获取响应的内容 3.解析内容（解析出对自己有用的部分） a.正则表达式 b.BeautifulSoup模块 c.pyquery模块 d.selenium模块 4.保存数据 a.文本文件(txt,csv等) b.数据库(mysql) c ...
分类：
编程语言 时间：
2018-11-11 00:03:33
阅读次数：
287
import requests from pyquery import PyQuery as pq import json import jsonpath from lxml import etree import os html = ''' first item second item third... ...
分类：
其他好文 时间：
2018-10-28 19:26:03
阅读次数：
182
PyQuery 是 Python 仿照 jQuery 的严格实现。语法与 jQuery 几乎完全相同。 PyQuery 是 Python 仿照 jQuery 的严格实现。语法与 jQuery 几乎完全相同。 官方文档：http://pyquery.readthedocs.io/ 安装 1 pip i ...
分类：
其他好文 时间：
2018-10-17 11:02:30
阅读次数：
129
1.python基础语法要扎实。 2.多实际动手练习，多练习题，比如Python处理文件，统计文件里的字符数，打印前十。 3.熟练运用python周边库。 Web：（flask、Django） 爬虫： (request、pyquery) 数据库：（mysql） 前端：（html、css、Javasc ...
分类：
编程语言 时间：
2018-10-05 16:04:35
阅读次数：
135
引用方法 from pyquery import PyQuery as pq 基本CSS选择器 from pyquery import PyQuery as pq html = ''' <div id="wrap"> <ul class="s_from"> asdasd <link href="ht ...
分类：
编程语言 时间：
2018-09-29 17:37:52
阅读次数：
144
第一篇：爬虫基本原理 第二篇：请求库之requests，selenium 第三篇：解析库之re、beautifulsoup、pyquery 第四篇：存储库之mongodb，redis，mysql 第五篇：爬虫高性能相关 第六篇：Scrapy框架 第七篇：分布式爬虫 第八篇：爬虫实战 ...
分类：
其他好文 时间：
2018-09-27 01:46:42
阅读次数：
136
lxml 的安装（xpath） pip3 install lxml 可能会缺少以下依赖： sudo apt-get install -y python3-dev build-e ssential libssl-dev libffi-dev libxml2 libxml2-dev libxslt1-d ...
分类：
编程语言 时间：
2018-09-17 17:36:09
阅读次数：
219
