目标：爬取网页，获得自己需要的信息步骤：1. 导入需要的模块2. 利用request向目标网站获得网页信息3. 用BeautifulSoup解析所获得的网页 3. 获得需要的信息所在的标签内容 4. 精简标签获得关键信息5. 获得关键信息之后，再处理（比如比大小）1、导入需要的模块Beautiful ...
分类：
Web程序 时间：
2018-11-09 20:58:04
阅读次数：
389
1.BeautifulSoup支持的解析器： python标准库：BeautifulSoup(markup, "html.parser") 执行速度适中，文档容错能力强 lxml HTML解析器：BeautifulSoup(markup, "lxml") 执行速度适快，文档容错能力强 lxml XM ...
分类：
其他好文 时间：
2018-11-09 10:52:55
阅读次数：
150
使用脚本安装和升级pip 要安装或升级pip，需要下载 get-pip.py. 地址：https://bootstrap.pypa.io/get-pip.py 然后运行以下命令 (需要管理员权限sudo): 使用脚本安装BeautifulSoup(bs4) 然后安装成功，接着检测下 然后输入pyth ...
分类：
系统相关 时间：
2018-11-08 18:28:24
阅读次数：
169
前言： 之前在大二的时候，接触到了Python语言，主要是接触Python爬虫那一块 比如我们常用的requests，re，beautifulsoup库等等 当时为了清理数据和效率，还专门学了正则表达式，异常的佩服自己哈哈哈哈哈 最近闲着无事干，秉承是Java是世界上最好的语言，Python能干，为 ...
分类：
编程语言 时间：
2018-11-04 21:12:06
阅读次数：
331
''' 时间：2018/11/03 功能：bs4提取结果 目录: 一: 登录拉勾网 ''' 一: 登录拉勾网 # coding:utf-8 import requests import re from bs4 import BeautifulSoup import urllib3 import ha... ...
分类：
编程语言 时间：
2018-11-03 14:11:53
阅读次数：
168
1、bs4 BeautifulSoup, 用来解析html数据，提供的接口非常的人性化， 简单 安装：pip install bs4 pip源，默认从国外源安装，我们指定为国内源安装，阿里源、豆瓣源 Ubuntu源， （1）指令配置源 pip install bs4 -i 源地址 （2）永久配置 p ...
分类：
其他好文 时间：
2018-10-31 13:51:25
阅读次数：
198
Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库,它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式.Beautiful Soup会帮你节省数小时甚至数天的工作时间. 快速开始，以如下html作为例子. 使用BeautifulSoup解析这段代码 ...
分类：
其他好文 时间：
2018-10-30 12:06:14
阅读次数：
148
目标：爬取本地网页中，评分大于3的文章，并打印出来 准备： BeautifulSoup：是一个可以从HTML和XML中读取数据的库。库也叫模块，在笨办法学Python中叫做特征，是其他程序员开发好的一些代码，可以拿来导入（import），然后调用。开发之前最好先学习一下Python的基本知识，《笨办 ...
分类：
Web程序 时间：
2018-10-28 17:55:59
阅读次数：
135
用python写爬虫时，有两个很好用第三方模块requests库和beautifulsoup库，简单学习了下模块用法： 1，requests模块 Python标准库中提供了：urllib、urllib2、httplib等模块以供Http请求，使用起来较为麻烦。requests是基于Python开发的 ...
分类：
其他好文 时间：
2018-10-28 12:49:49
阅读次数：
149
1 from bs4 import BeautifulSoup 2 3 4 5 6 html = """ 7 This is a python demo page 8 9 The demo python introduces several python courses. 10 Python is ... ...
分类：
其他好文 时间：
2018-10-27 11:49:54
阅读次数：
171
