#coding:utf-8 ''' Created on 2017年10月9日 @author: li.liu ''' from selenium import webdriver from lxml import etree import urllib import urllib2 import ... ...
分类：
编程语言 时间：
2017-12-18 18:38:30
阅读次数：
458
添加依赖 #yum install libxslt-devel libxml2-devel 安装(已安装好pip) #python -m pip install lxml 补充：升级pip #wget -q https://bootstrap.pypa.io/get-pip.py #python g ...
分类：
编程语言 时间：
2017-12-17 13:15:09
阅读次数：
137
CSS选择器：BeautifulSoup4 和lxml一样，Beautiful Soup也是一个HTML/XML的解析器，主要的功能也是如何解析和提取HTML/XML数据。 lxml只会局部遍历，而Beautiful Soup是基于HTML DOM的，会载入整个文档，解析整个DOM树，因此时间和内存 ...
分类：
编程语言 时间：
2017-12-14 04:14:50
阅读次数：
239
1 #-*- coding:utf-8 -*- 2 3 import urllib2 4 from lxml import etree 5 6 class CrawlJs(): 7 #定义函数，爬取对应的数据 8 def getArticle(self,url): 9 print '████████... ...
分类：
其他好文 时间：
2017-12-09 16:52:52
阅读次数：
152
首先下载pywin32、Twisted的whl包 下载地址：http://www.lfd.uci.edu/~gohlke/pythonlibs/ 通过命令:pip install xxxx 安装以下文件 安装lxml==3.7.2 安装zope.interface 安装pywin32-221-cp3 ...
分类：
编程语言 时间：
2017-12-04 13:13:27
阅读次数：
220
一、BeautifulSoup模块 BeautifulSoup模块，该模块用于接收一个HTML或XML字符串，然后将其进行格式化，之后便可以使用它提供的方法进行快速查找指定元素，从而使得在HTML或XML中查找指定元素变得简单。 安装： 使用示例： from bs4 import Beautiful ...
分类：
其他好文 时间：
2017-12-02 12:56:43
阅读次数：
187
当抓取网页时，常见的任务是从HTML源码中提取数据。现有的一些库可以达到这个目的： BeautifulSoup lxml Scrapy 提取数据有自己的一套机制。它们被称作选择器(seletors)，因为他们通过特定的 XPath 或者 CSS 表达式来“选择” HTML 文件中的某个部分。 构造选 ...
分类：
其他好文 时间：
2017-11-26 19:39:38
阅读次数：
187
1 # -*- coding: utf-8 -*- 2 from lxml import etree 3 import requests,re,random 4 import os,time,json,redis 5 from myweb.yichewang import user_agent 6 ... ...
分类：
其他好文 时间：
2017-11-26 18:46:34
阅读次数：
214
环境：windows10 64bit 需要安装: 1. wheel pip3 install wheel 2. lxml http://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml 3. PyOpenssl https://pypi.python.org/pypi ...
分类：
其他好文 时间：
2017-11-25 13:00:06
阅读次数：
151
网站系统开发需要的技术 lJava语言 l面向对象分析设计思想 l设计模式和框架结构 lXML语言 l网页脚本语言 l数据库 l应用服务器 l集成开发环境 课堂测试源码 <%@ page contentType = "text/html; charset=utf-8" import = "java. ...
分类：
Web程序 时间：
2017-11-22 00:06:16
阅读次数：
297
