参照着网上的爬虫案例（点我），先做了一个demo，基本的爬虫项目创建，以及数据抽取，数据分析，数据保存等等过程基本上有所掌握。
我的需求是需要检索指定的百度贴吧，根据指定的关键字库，搜索出含有关键字的链接，并抽取出来，用于后续告警。 因此，基于需求，分如下步骤：
第一：基于Scrapy创建爬虫项目；...
分类：
编程语言 时间：
2014-04-28 17:37:30
阅读次数：
707
PHP里做一般的获取内容时，用自带的file_get_contents()函数基本就足够了。当然，这个函数只能抓一些简单的数据，如果是遇到需要登录的页面，就不行了，而且效率及稳定性也不是很强。所以要是有特殊需求的话，还是用curl吧。不仅仅速度快，而且非常稳定，基本上用curl抓取失败的几率很小。而...
分类：
Web程序 时间：
2014-04-28 16:28:42
阅读次数：
763
想写个自动定会议室的程序。1、会议系统登录后，存在session，提交会议室的订单通过httpwatch拼接后获得链接地址，直接访问链接及可以了2、如果没有提前登录，就无法提交链接了。使用python+PAMIE实现了了自动登录的过程（登录的链接一直拼接不出来。。）下面说说这个研究过程。。1、一开始...
分类：
编程语言 时间：
2014-04-28 16:04:47
阅读次数：
848
时间：4月27日晚上9点地点：信息学院楼组员
4月27日今日完成任务4月28日明天计划任务杨波数据库导入，可以实现简单的查询；连接功能，写个建议界面；周亚豪弄好了界面输出，了解了欢迎界面；完善功能选择界面、查询界面、自习时间安排界面以及欢迎界面；崔海营数据库导入，可以实现简单的查询；将所有教室的数据...
分类：
其他好文 时间：
2014-04-28 15:56:45
阅读次数：
455
ASP.NET
MVC应用程序默认模板中会有主页、联系方式、关于。同时还提供了注册和登录。本示例是一个非常简单的应用程序，只是让我们了解了ASP.NET MVC一点点。
分类：
Web程序 时间：
2014-04-28 15:45:05
阅读次数：
608
这个天气预报采集是从中国天气网提取广东省内主要城市的天气并回显。本来是打算采集腾讯天气的，但是貌似它的数据是用js写上去还是什么的，得到的html文本中不包含数据，所以就算了爬虫简单说来包括两个步骤：获得网页文本、过滤得到数据。
1、获得html文本。 python在获取html方面十分方便，寥.....
分类：
编程语言 时间：
2014-04-28 15:31:09
阅读次数：
712
介绍功能：网络爬虫开发语言：c++开发者：Sébastien
Ailleret（法国）特点：只抓取网页，高效（一个简单的larbin的爬虫可以每天获取500万的网页）安装安装平台：Ubuntu
12.10下载：http://sourceforge.net/projects/larbin/files/...
分类：
其他好文 时间：
2014-04-28 14:46:03
阅读次数：
565
委托与事件废话一堆：网上关于委托、事件的文章有很多，一千个哈姆雷特莎士比亚就有一千个莎士比亚，以下内容均是本人个人见解。1. 委托1.1 委托的使用
这一小章来学习一下怎么简单的使用委托，了解一些基本的知识。 这里先看一下其他所要用到的类的信息 /// /// 函数用例 /// public...
分类：
其他好文 时间：
2014-04-28 00:58:29
阅读次数：
435
在上一篇文章中，我们详细介绍了如何驱动LCD，对于在LCD屏上呈现各种简单的图形已经不是一件高不可攀的难事。但如何绘制字符呢？其实每一字符就是一幅图像，字符的大小对应于图像的大小，字符的笔画对应于图像的内容。那么如何把字符转换为图像呢？简单的方法是使用“字模提取”之类的软件，它能够把任意的字符转换为...
分类：
其他好文 时间：
2014-04-27 23:39:57
阅读次数：
524
原理：在实体类变更前对其进行备份，调用Newtonsoft.Json下的序列化方法将其存储成json格式，并在需要时调用反序列化方法，转化成实体类public
static class TestEntityChange{ //实体备份方法，在实体为修改前进行备份 public stati...
分类：
其他好文 时间：
2014-04-27 23:16:08
阅读次数：
555
