参照着网上的爬虫案例（点我），先做了一个demo，基本的爬虫项目创建，以及数据抽取，数据分析，数据保存等等过程基本上有所掌握。
我的需求是需要检索指定的百度贴吧，根据指定的关键字库，搜索出含有关键字的链接，并抽取出来，用于后续告警。 因此，基于需求，分如下步骤：
第一：基于Scrapy创建爬虫项目；...
分类：
编程语言 时间：
2014-04-28 17:37:30
阅读次数：
707
这个天气预报采集是从中国天气网提取广东省内主要城市的天气并回显。本来是打算采集腾讯天气的，但是貌似它的数据是用js写上去还是什么的，得到的html文本中不包含数据，所以就算了爬虫简单说来包括两个步骤：获得网页文本、过滤得到数据。
1、获得html文本。 python在获取html方面十分方便，寥.....
分类：
编程语言 时间：
2014-04-28 15:31:09
阅读次数：
712
介绍功能：网络爬虫开发语言：c++开发者：Sébastien
Ailleret（法国）特点：只抓取网页，高效（一个简单的larbin的爬虫可以每天获取500万的网页）安装安装平台：Ubuntu
12.10下载：http://sourceforge.net/projects/larbin/files/...
分类：
其他好文 时间：
2014-04-28 14:46:03
阅读次数：
565
这两天看了好几篇不错的文章，有的时候想把好的文章 down 下来放到 kindle
上看，便写了个爬虫脚本，因为最近都在搞 node，所以就很自然的选择 node
来爬咯～本文地址：http://www.cnblogs.com/hustskyking/p/spider-with-node.html，...
分类：
Web程序 时间：
2014-04-28 12:20:09
阅读次数：
566
