下面是我用python爬取的房价数据，程序可以跑完，但是不知何故。数据库中并没有收到数据？请大家帮忙看看 if __name__=='__main__': urls=['https://suzhou.anjuke.com/sale/p{}-rd1/?kw=%E8%8B%8F%E5%B7%9E'.fo ...
分类：
编程语言 时间：
2018-04-08 22:31:35
阅读次数：
901
现在用下面这个案例来演示如果爬取安居客上面深圳的租房信息，我们采取这样策略，首先爬取所有租房信息的链接地址，然后再根据爬取的地址获取我们所需要的页面信息。访问次数多了，会被重定向到输入验证码页面，这个问题后面再解决 1. 创建项目： 进入项目路径，使用命令 scrapy startproject a ...
分类：
其他好文 时间：
2018-02-04 19:41:35
阅读次数：
218
//设置请求时间 string html = string.Empty; try { HttpWebRequest request = HttpWebRequest.Create(url) as HttpWebRequest;//模拟请求 request.Timeout = 30 * 1000;// ...
分类：
Web程序 时间：
2018-01-03 16:04:49
阅读次数：
217
介绍使用八爪鱼7.0采集安居客网页信息的方法（以深圳写字楼为例） ...
分类：
其他好文 时间：
2017-09-07 11:59:49
阅读次数：
425
# -*- coding: utf-8 -*- """ Created on Sat Jun 24 22:03:17 2017 @author: willowj """ import sys stdout, stdin, stderr = sys.stdout, sys.stdin, sys.std... ...
分类：
其他好文 时间：
2017-08-07 20:48:18
阅读次数：
408
Heroku是业内知名的云应用平台，从对外提供服务以来，他们已经有上百万应用的托管和运营经验。前不久，创始人Adam Wiggins根据这些经验，发布了一个“十二要素应用宣言（The Twelve-Factor App）”,该宣言由国内工作于安居客的程序员梁山将其翻译为中文，InfoQ中文站摘录如下 ...
分类：
其他好文 时间：
2017-07-09 20:53:26
阅读次数：
218
这两天苹果打击App刷榜者的消息刷屏了，从腾讯科技、appying多个媒体渠道看到，《安居客》、《友秘》、《微在》、《秦时明月2》、《悟空与貂蝉》等应用和游戏由于刷榜遭遇了苹果的严重惩处，有的被降权到1000名以后，有的直接被下架了，可能刷榜的还有非常多，仅仅是没有那么明显。还没有被苹果揪出来。这些 ...
分类：
移动开发 时间：
2017-05-17 17:16:21
阅读次数：
275
个人爬虫项目 安居客爬虫： 目标网站：https://sz.fang.anjuke.com/ github仓库：https://github.com/Glf9832/AjkSpider.git ...
分类：
其他好文 时间：
2017-05-01 12:49:26
阅读次数：
85
第一步先分析网站结构http://esf.zs.fang.com/ 寻找我们需要获取的信息，点击进去看看， 链接里面信息更加详细，这些就是我们要获取的。 1.我们可以先获取http://esf.zs.fang.com/链接下的所有详细链接http://esf.zs.fang.com/chushou/ ...
分类：
编程语言 时间：
2017-04-30 20:33:47
阅读次数：
1763
