from selenium import webdriver import time from bs4 import BeautifulSoup url = "http://www.hsbkos.com/" soup = BeautifulSoup() soup.findAll('div',{'cl... ...
分类：
编程语言 时间：
2018-02-06 11:40:33
阅读次数：
242
select find和find_all有什么区别呢，请看代码： >>> ...
分类：
其他好文 时间：
2018-02-05 00:31:43
阅读次数：
2811
用requests 模块做了个简单的爬虫小程序，将博客的一篇文章以及图片保存到本地，文章格式存为'.html'。当文章保存到本地后，图片的连接可能是目标站点的绝对或者相对路径，所以要是想在本地也显示图片，需要将保存下来图片的本地路径替换到本地的html文件里。 保存网页用的时requests模块，保 ...
分类：
编程语言 时间：
2018-02-04 13:53:58
阅读次数：
539
BeatifulSoup模块 一、介绍 Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式.Beautiful Soup会帮你节省数小时甚至数天的工作时间.你可能在寻找 Beautiful Sou ...
分类：
其他好文 时间：
2018-02-02 00:53:17
阅读次数：
819
一般爬虫都是用urllib包,requests包 配合正则.beautifulsoup等包混合使用，达到爬虫效果，不过有框架谁还用原生啊，现在我们来谈谈SCRAPY框架爬虫， 现在python3的兼容性上来了，SCRAPY不光支持python2版本了，有新的不用旧的，现在说一下让很多人望而止步的安装 ...
分类：
编程语言 时间：
2018-01-31 11:37:50
阅读次数：
103
一、背景近期在学习爬虫，利用Requests模块获取页面，BeautifulSoup来获取需要的内容，最后利用xlsxwriter模块讲内容保存至excel，在此记录一下，后续可举一反三，利用其抓取其他内容持久和存储到文件内，或数据库等。二、代码编写了两个模块，geturl3和getexcel3，最后在main内调用geturl3.py代码内容如下：#!/bin/envpython#-*-codi
分类：
编程语言 时间：
2018-01-31 11:32:48
阅读次数：
142
BeautifulSoup 是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式，同时应用场景也是非常丰富，你可以使用它进行XSS过滤，也可以是使用它来提取html中的关键信息。 官方文档：https://www.crummy. ...
分类：
其他好文 时间：
2018-01-29 19:12:27
阅读次数：
172
from bs4 import BeautifulSoup from bs4.element import * data = """ beatifulsoup learning note i`m son1 哈哈 ... ...
分类：
其他好文 时间：
2018-01-29 15:43:51
阅读次数：
181
python下载安装BeautifulSoup库 1、下载https://www.crummy.com/software/BeautifulSoup/bs4/download/4.5/ 2、解压到解压到python目录下： 3、“win+R”进入cmd；依次输入如下代码： 4、安装完成 5、进入py ...
分类：
编程语言 时间：
2018-01-29 11:30:57
阅读次数：
283
1、Python很有名，但是一直没在实际项目中用过，今天花30分钟学习下。去Python官网https://www.python.org/downloads/ 2、2.X与3.X版本相差比较大，新手用最新的3.6.4。3、下载安装。4、安装BeautifulSoup,CMD进入C:\Users\zg ...
分类：
编程语言 时间：
2018-01-29 00:22:38
阅读次数：
158
