这是一个web查找的根本程序，从命令行输入查找条件（开端的URL、处置url的最大数、要查找的字符串),它就会逐一对Internet上的URL进行实时查找,查找并输出匹配查找条件的页面。 这个程序的原型来自《java编程艺术》，为了非常好的剖析，站长去掉了其间的GUI有些，并稍作修改以适用jdk1....
分类：
编程语言 时间：
2014-06-18 16:22:03
阅读次数：
242
关键词: nutch今日来看看Nutch怎么Parse页面的：Nutch运用了两种Html parser东西（NekoHTML和TagSoup）来完成html的获取，这两种东西是可经过配置来选择的。当然你要自己完成Parser你还能够选择HTMLParser[根据visitor访问者形式一起也供给了...
分类：
其他好文 时间：
2014-06-18 15:28:46
阅读次数：
181
近来方案做个爬虫的小比如，后来想想干脆运用的全部一点，今后就作为是个工程笔记，忘掉的代码就可以再到这个工程里查查了。solr是个很不错的东西，直接用就OK。下一方案方案看看compass，是一个封装了LuceneAPI的一个结构，用起来有点类似Hibernate，值得学习一下~ 好了，先个我们共享一...
分类：
其他好文 时间：
2014-06-17 14:15:31
阅读次数：
193
1.数据的完整性简介就是正确性、准确性，包含三种：实体完整性、参照完整性、用户自定义完整性。Oracle中主要通过约束、触发器、过程函数实现的。以下内容讲通过约束实现数据完整性。举例两个表：学生（学号，姓名，系编号）系（系编号，系名称）员工（编号，姓名，出生日期，..
分类：
数据库 时间：
2014-06-16 16:46:16
阅读次数：
221
一. 为什么要学习JavaMail
为什么要学习JavaMail开发? 现在很多WEB应用在开发时都需要集成邮件发送功能，例如：
1. 给新注册的用户自动发送一封包含其注册信息的欢迎E-Mail。
2. 给过生日的注册会员自动发送一封表示祝贺的E-Mail。
3. 将网站的最新活动信息通过E-Mail发送给所有的注册会员。...
分类：
编程语言 时间：
2014-06-15 13:42:25
阅读次数：
395
定向数据网络爬虫和搜索引擎项目设计（新闻数据抓取、分析、加工、检索）版本号： v 1.0.0 编写人： 张 文 豪 日 期： 2014年6月10日文档说明：这个文档还在编写之中，文章中很多写在“保留”二字的不是每月东西，而是没有写。虽然没有具体实现，但是我觉得我把我的经验和思考都写进去了。虽然对于读...
分类：
其他好文 时间：
2014-06-15 08:25:48
阅读次数：
399
#!/usr/bin/env python# -*- coding: utf-8 -*-############################################## File : requestAnyURLWithCookie.py# Author : luc...
分类：
Web程序 时间：
2014-06-15 00:33:30
阅读次数：
187
#!/usr/bin/env python# -*- coding: utf-8 -*-############################################## File : loginMMVOIP.py# Author : lucasysfeng# Re...
分类：
Web程序 时间：
2014-06-15 00:18:13
阅读次数：
245
有个视频专门讲过这个爬虫，但是太罗嗦了，顺便整理下，而且到现在，360也不傻，已经进化了，采用原来的方式，多少有点bug，这个后面会说。正题如下：
语言：python2.7.6
模块：urllib,urllib2,re,time
目标：输入任意词，抓到其联想词
版本：w1
原理：在360搜索主页：http://www.so.com/，当你输入”科技“时，搜索框会列出相应的联想词或者短...
分类：
编程语言 时间：
2014-06-14 09:11:06
阅读次数：
1111
