通过beautifulsoup对json爬取的文件进行元素审查，获取是否含有p标签 ...
分类：
Web程序 时间：
2017-07-13 16:30:28
阅读次数：
247
记录django的学习笔记：http://www.cnblogs.com/qwj-sysu/tag/django/ uwsgi的文档：http://uwsgi-docs.readthedocs.io/en/latest/Nginx.html beautifulsoup的中文文档：https://ww ...
分类：
Web程序 时间：
2017-07-13 00:53:59
阅读次数：
145
本次python爬虫百步百科，里面详细分析了爬虫的步骤，对每一步代码都有详细的注释说明，可通过本案例掌握python爬虫的特点： 1、爬虫调度入口（crawler_main.py） ...
分类：
编程语言 时间：
2017-07-12 21:33:31
阅读次数：
662
BeautifulSoup是python一种原生的解析文件的模块，区别于scrapy，scrapy是一种封装好的框架，只需要按结构进行填空，而BeautifulSoup就需要自己造轮子，相对scrapy麻烦一点但也更加灵活一些以爬取百度贴吧内容示例说明。#-*-coding:utf-8-*-
__author__=‘fengzhankui‘
importur..
分类：
其他好文 时间：
2017-07-11 14:47:57
阅读次数：
229
from urllib2 import urlopen from bs4 import BeautifulSoup # Get the next page url from the current page url def get_next_page_url(url): page = urlopen... ...
分类：
其他好文 时间：
2017-07-10 23:50:34
阅读次数：
290
<div class="item name" title="中央公园"> <a href="/Attraction_Review-g60763-d105127-Reviews-Central_Park-New_York_City_New_York.html" target="_blank" clas ...
分类：
其他好文 时间：
2017-07-09 11:02:24
阅读次数：
493
一.Beautiful Soup的安装与测试 官方网站：https://www.crummy.com/software/BeautifulSoup/ Beautiful Soup安装与使用文档: https://www.crummy.com/software/BeautifulSoup/bs4/do ...
分类：
Web程序 时间：
2017-07-08 00:27:09
阅读次数：
297
处理jsp页面会出现bug。。。 所以。。不要使用BeautifulSoup处理 jsp和php等脚本页面。。。需要用正则来写。。。这是我摸索半天得来的结论。。。。。 ...
分类：
编程语言 时间：
2017-07-05 16:40:56
阅读次数：
444
使用BeautifulSoup进行定位提取的时候，因为数据是一个列表，所以会使用到索引，但是经常会提示索引越界 ，这其实就是在我们匹配的时候，太过大意， 如上： 注意td和tr，tr说的是行，td是精确到元素的，所以后面的find_all很重要，td换成tr在执行后面的时候，匹配到的数据一定不一样 ...
分类：
编程语言 时间：
2017-07-04 20:11:19
阅读次数：
198
import requests from bs4 import BeautifulSoup import bs4 #Tag类型判断是需要用到这里的库 def getHTMLText(url): try: r = requests.get(url,timeout = 30) r.raise_for_s... ...
分类：
其他好文 时间：
2017-07-03 12:23:25
阅读次数：
169
