Python并不是我的主业，当初学Python主要是为了学爬虫，以为自己觉得能够从网上爬东西是一件非常神奇又是一件非常有用的事情，因为我们可以获取一些方面的数据或者其他的东西，反正各有用处。 这两天闲着没事，主要是让脑子放松一下就写着爬虫来玩，上一篇初略的使用BeautifulSoup去爬某个CSD ...
分类：
编程语言 时间：
2017-10-28 12:57:25
阅读次数：
453
编程模块：requests,lxml，pymongo，time，BeautifulSoup 首先获取所有产品的分类网址： 复制代码 1 def step(): 2 try: 3 headers = { 4 。。。。。 5 } 6 r = requests.get(url,headers,time..... ...
分类：
其他好文 时间：
2017-10-25 15:25:00
阅读次数：
136
绝对干活，爬虫必备，解析神奇！本文以短小精悍的实例分析BeautifulSoup的CSS选择器中每一个常用的方法。 ...
分类：
Web程序 时间：
2017-10-21 13:21:41
阅读次数：
157
BeautifulSoup 该模块用于接收一个HTML或XML字符串，然后将其进行格式化，之后遍可以使用他提供的方法进行快速查找指定元素，从而使得在HTML或XML中查找指定元素变得简单。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 2 ...
分类：
Web程序 时间：
2017-10-20 18:41:28
阅读次数：
187
通过具体的实例详细介绍BeautifulSoup模块中最常用的功能以及其在网络爬虫中的应用。 ...
分类：
其他好文 时间：
2017-10-20 18:28:18
阅读次数：
192
利用Python完成简单的爬虫 最近学习到了爬虫，瞬时觉得很高大上，想取什么就取什么，感觉要上天。这里分享一个简单的爬取汽车之家文章列表的图片教程，供大家学习。 需要的知识点储备 本次爬虫脚本依赖两个模块：requests模块，BeautifulSoup模块。其中requests模块完成url的请求 ...
分类：
编程语言 时间：
2017-10-20 16:05:06
阅读次数：
221
import requests from bs4 import BeautifulSoup from datetime import datetime import re import pandas import sqlite3 url = 'http://news.gzcc.cn/html/xia... ...
分类：
其他好文 时间：
2017-10-19 12:32:12
阅读次数：
138
趴房源 import requestsfrom bs4 import BeautifulSoup # 网页的请求头header = { 'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, lik ...
分类：
其他好文 时间：
2017-10-19 10:34:14
阅读次数：
231
import requests from bs4 import BeautifulSoup from datetime import datetime import re def getclick(newsurl): num = re.search('_(.*).html',newsurl) id ... ...
分类：
其他好文 时间：
2017-10-18 20:01:56
阅读次数：
124
#encoding:utf-8 import urllib import urllib2 import cookielib from bs4 import BeautifulSoup filename = 'cookie_csdn.txt' #声明一个MozillaCookieJar对象实例来保存c... ...
分类：
编程语言 时间：
2017-10-18 13:16:51
阅读次数：
172
