突然想获取一些网上的数据来玩玩,因为有SAE的MySql数据库,让它在那呆着没有什么卵用!于是就开始用PHP编写一个爬取糗事百科首页糗事的小程序,数据都保存在MySql中,岂不是很好玩!
说干就干!首先确定思路
获取HTML源码--->解析HTML--->保存到数据库
没有什么难的
1、创建PHP文件“getDataToDB.php”,
2、获取指定URL的HTML源码
这里我用的是c...
分类:
Web程序 时间:
2015-05-18 23:07:00
阅读次数:
236
#出处:http://python.jobbole.com/81351/#确定url并抓取页面代码,url自己写一个import urllib,urllib2def getUrl(): page=1 url="http://www.qiushibaike.com/hot/page/"+s...
分类:
编程语言 时间:
2015-05-16 00:00:01
阅读次数:
370
开始学习python,在网上找了一个扒糗事百科精华的爬虫,自己稍许的修改了一下,就可以正常的扒拉糗百精华,别人的代码不敢独占,就贴出来分享给大家,废话没有上代码: #?-*-?coding:?utf-8?-*-??
???
...
分类:
编程语言 时间:
2015-05-13 01:01:54
阅读次数:
209
1.本文的目的是练习Web爬虫目标:1.爬去糗事百科热门段子2.去除带图片的段子3.获取段子的发布时间,发布人,段子内容,点赞数。2.首先我们确定URL为http://www.qiushibaike.com/hot/page/10(可以随便自行选择),先构造看看能否成功构造代码: 1 # -*- c...
分类:
编程语言 时间:
2015-05-08 21:51:04
阅读次数:
196
糗事百科(以下简称“糗百”)被誉为移动互联网时代的新娱乐手段,其上海量真实用户的糗事深受喜爱,每天有1亿次动态请求,峰值请求数为每秒30000次。面对如此高的并发访问量,糗百原来自建的平台越来越难以支撑,...
分类:
其他好文 时间:
2015-05-05 14:38:03
阅读次数:
121
收集了一些实用swift编写的app,这些demo都是不错的值得学习的。知乎日报Swift-ZhihuDailySwift版知乎日报参照了YANGReal的糗事百科和uitableview的例子,这些虽说是demo,也是完整的app,使用了爱加密的app加密技术,非常不错,感谢!我觉得学习一门语言光看是没用的,只有投..
分类:
移动开发 时间:
2015-01-20 12:10:18
阅读次数:
176
收集了一些实用swift编写的app,这些demo都是不错的值得学习的。
知乎日报
Swift-ZhihuDaily
Swift版知乎日报
参照了YANGReal的糗事百科和uitableview的例子,这些虽说是demo,也是完整的app,使用了爱加密的app加密技术,非常不错,感谢!
我觉得学习一门语言光看是没用的,只有投入到实践项目中去,才能最快速的掌...
分类:
移动开发 时间:
2015-01-20 10:31:20
阅读次数:
227
本项目是本人在学校的时候准备出来实习的时候做的,由于代码有些粗糙迟迟没有发出来。项目的服务器搭建为php环境,本人用的搭建环境的软件是使用PHPStudy。...
分类:
其他好文 时间:
2014-12-22 11:18:14
阅读次数:
197
本项目是本人在学校的时候准备出来实习的时候做的,由于代码有些粗糙迟迟没有发出来。项目的服务器搭建为php环境,本人用的搭建环境的软件是使用PHPStudy。
分类:
其他好文 时间:
2014-12-22 10:55:20
阅读次数:
119
# coding=utf-8
import urllib2
import urllib
import re
class QiuShi:
def _init_(self):
self.page = 1
# 从网页获取糗事
def GetQiuShis(self,page):
#网址
url = "http://www.qiushibaike.com/...
分类:
编程语言 时间:
2014-12-21 15:22:50
阅读次数:
279