```python from bs4 import BeautifulSoup
import requests url = 'http://dangjian.gmw.cn/node_11940.htm'
html = requests.get(url).content
# prettify()用于格... ...
分类：
Web程序 时间：
2018-08-10 11:00:46
阅读次数：
205
一、介绍 BeautifulSoup为一个python库，它可以接收一个HTML或XML的字符串或文件，并返回一个BeautifulSoup对象，之后我们可以使用BeautifulSoup提供的众多方法来对文件内容进行解析。 二、安装 1、使用pip安装 2、通过apt get安装 推荐使用 作为解 ...
分类：
其他好文 时间：
2018-08-09 19:27:42
阅读次数：
141
In [1]: from bs4 import BeautifulSoup In [2]: s = '''<div class="markdown_views"> ...: <p>BeautifulSoup是Python的一个库，最主要的功能就是从网页 ...: 爬取我们需要的数据。Beautifu ...
分类：
Web程序 时间：
2018-08-09 13:58:05
阅读次数：
520
``` """ this is a module,多行注释 """ import re from urllib import request # BeautifulSoup:解析数据结构 推荐库 Scrapy:爬虫框架 #爬虫，反爬虫，反反爬虫 #ip 封 #代理ip库 class Spider()... ...
分类：
编程语言 时间：
2018-08-08 22:55:18
阅读次数：
384
知识预览 beautifulsoup的简单使用 beautifulsoup的遍历文档树 beautifulsoup的搜索文档树 beautifulsoup的css选择器 回到顶部 beautifulsoup的简单使用 简单来说，Beautiful Soup是python的一个库，最主要的功能是从网页 ...
分类：
其他好文 时间：
2018-08-07 15:15:27
阅读次数：
162
前言： 自己利用requests模块下载页面，使用Beautifulsoup解析Html内容，久而久之会遇到各种性能问题，所有专业级的爬虫还得使用 爬虫框架 Scrapy Scrapy功能 引用twisted模块异步下载页面 HTML解析成对象 代理 延迟下载 URL字段去重 指定深度、广度 ... ...
分类：
其他好文 时间：
2018-08-06 14:37:20
阅读次数：
124
* BeautifulSoup 的.find(), .findAll() 函数原型 * 取得 span.green bsObj.findAll("span", {"class":"green"}) * 取得 h1,h2,h3,h4,h5,h6 bsObj.findAll({"h1","h2","h3 ...
分类：
编程语言 时间：
2018-08-05 11:53:39
阅读次数：
248
一、beautifulsoup的简单使用 1. beautifulsoup是python的一个库，最主要的功能是从网页抓取数据。 ''' Beautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。 它是一个工具箱，通过解析文档为用户提供需要抓取的数据，因为 ...
分类：
其他好文 时间：
2018-08-04 17:31:59
阅读次数：
132
beautifulSoup基本用法及find选择器 总结来源于官方文档：https://www.crummy.com/software/BeautifulSoup/bs4/doc/index.zh.html#find-all 示例代码段 html_doc = """ <html> <head><ti ...
分类：
其他好文 时间：
2018-08-03 16:23:19
阅读次数：
204
官方学习文档：http://pyquery.readthedocs.io/en/latest/api.html 一、什么是PyQuery? 答：强大有灵活的网页解析库，模仿jQuery实现。如果你觉得正则表达式写起来太麻烦，如果你觉的BeautifulSoup语法太难记，如果你熟悉jQuery的语法 ...
分类：
编程语言 时间：
2018-08-03 01:01:35
阅读次数：
260
