首先说一下,我用的是python 2.7，刚好在学Python，今天想去爬点图片当壁纸,但是当我用 SGMLParser 做 <img> 标签解析的时候,发现我想要的那部分根本没获取到,我尝试用 lxml 修复网页,还是解析不出..但是当我把此部分字段单独提出来时,我却可以将此部分标签解析出来,实在 ...
分类：
编程语言 时间：
2016-11-27 20:23:07
阅读次数：
245
from lxml import etreeimport requestsdef getHtml(html): novelcontent = requests.get(html).content return etree.HTML(novelcontent)source = getHtml("htt ...
分类：
Web程序 时间：
2016-11-26 07:35:51
阅读次数：
255
来自：https://www.zhihu.com/question/26857761 解决步骤： 1. 安装wheel，命令行运行： pip install wheel 2.在这里下载对应的.whl文件，注意别改文件名！ http://www.lfd.uci.edu/~gohlke/pythonli ...
分类：
编程语言 时间：
2016-11-19 23:44:18
阅读次数：
219
scrapy框架需要在Python2.7，lxml,OpenSSL,pip程序或库的基础之上创建。因此，首先，先检查下是否包含上述四个程序或库kuku@worker1:~$python
Python2.7.12(default,Jul12016,15:12:24)
[GCC5.4.020160609]onlinux2
Type"help","copyright","credits"or"license"formoreinforma..
分类：
系统相关 时间：
2016-11-17 02:19:02
阅读次数：
382
学习Python爬虫时，需要用到lxml库。在安装时，出现了错误！ 下面是已经解决的过程： 1. 安装wheel库 2.去 http://www.lfd.uci.edu/~gohlke/pythonlibs/ 下载 对应的lxml库 ，我的是2.7.12版本的(第一个) 3. 安装本地lxml的.w ...
分类：
编程语言 时间：
2016-11-14 00:32:31
阅读次数：
182
之前记得安装libxslt和libxml yum install libxml* -yyum install libxslt* -y wget http://lxml.de/files/lxml-3.1.2.tgztar xzvf lxml-3.1.2.tgzcd lxml-3.1.2python ...
分类：
编程语言 时间：
2016-11-11 17:32:39
阅读次数：
141
#coding=utf-8import requestsfrom lxml import etreeimport sysimport reimport csvsys.getdefaultencoding()reload(sys)sys.setdefaultencoding('utf-8')proxi ...
分类：
其他好文 时间：
2016-11-06 17:25:44
阅读次数：
199
模块： （1）url管理器：对url进行管理 （2）网页下载器（urllib2）：将需要爬取的url指定的网页以字符串的形式下载下来 （3）网页解释器（BeautifulSoup）：解析 利用urllib2下载网页的方法： 方法1： 方法2： 方法3： 网页解释器种类： （1）正则表达式 （2）ht ...
分类：
编程语言 时间：
2016-11-04 16:45:13
阅读次数：
265
windows 系统 python3.5安装 lxml 库 ...
分类：
编程语言 时间：
2016-11-02 18:09:12
阅读次数：
354
在搭建scrapy爬虫框架时,通过pip安装lxml遇到了这个问题,我是用32位的windows搭建爬虫框架，python版本是2.7.12, 解决方案如下： 原因： 在网上各种找原因，有大神是说没安装libxml2-devel and libxslt-devel，和没有安装 libxml2和 li ...
分类：
其他好文 时间：
2016-10-20 15:27:17
阅读次数：
221
