以前爬的数据量都有点少了,所以现在写个爬全站数据爬虫来,用redis进行URL的去重处理,采用mysql储存清洗过后房产数据,采用线程池来进行调度,进行多线程爬取 下面是房天下所有地区二手房和新房的URL,为后续爬取提供起始URL: ...
分类:
Web程序 时间:
2017-10-29 17:43:23
阅读次数:
464
1.activity的跳转:通过在页面添加一个windowdialog对象,在src属性绑定打开的页面。通过windowdialog对象的open()方法执行打开操作。跳转到的子页面可以通过this.owner()来获取主页面的windowdialog对象,获取到对象后可以通过对象的send(dat ...
$new_id_list;//数据信息$html = "";foreach ($new_id_list as $id){ $this->is_already_export($id); $list = $erotic_novels->where("id=$id")->find(); $data['ex ...
分类:
Web程序 时间:
2017-10-05 17:16:53
阅读次数:
199
智能标签foreach-Array, 智能标签foreach-List数据组,智能标签 foreach list自定义类型接口: /** * 智能标签foreach-Array * @param num * @return */public List<Student> findByForeachAr ...
分类:
其他好文 时间:
2017-09-24 22:23:40
阅读次数:
178
1、面向对象引子 你现在是一家游戏公司的开发人员,现在需要你开发一款叫做<人狗大战>的游戏,你就思考呀,人狗作战,那至少需要2个角色,一个是人,一个是狗,且人和狗都有不同的技能,比如人拿棍打狗,狗可以咬人,怎么描述这种不同的角色和他们的功能呢?你搜罗了自己掌握的所有技能,写出了下面的代码来描述这两个 ...
分类:
编程语言 时间:
2017-09-08 13:18:22
阅读次数:
222
曾接触到一个报文发送的项目,这个项目的报文发送,虽有报文优先级,但却无按照报文优先级发送的功能。 因此,我便思考了一下,将自己的设计思路发出来,与大家共享。 首先明确的是,我所设想的报文发送是基于 Redis的 List 数据存储结构。 报文有三个优先级:高、中、低;报文有两个类型:定时发送报文和普 ...
分类:
其他好文 时间:
2017-09-01 21:16:45
阅读次数:
178
需要引入的jar包: 1、前端 2、后端接收,并生成原始的List数据 3、下载 4、List写入到Excel对象中 参考链接: http://blog.csdn.net/renlei0109/article/details/36906409 http://bbs.csdn.net/topics/3 ...
分类:
编程语言 时间:
2017-08-09 10:06:17
阅读次数:
233
在使用gui时用jlist控件在里面添加需要的列表时使用listmodle来添加。 我做的时将数据库查询的结果显示在里面所以方法可能会不同,下面代码如下非常简单。 其实就是用listmodel.addeliement方法添加结果集里获取的前两个字符,循环完成就添加完成。用listModel.remo ...
分类:
其他好文 时间:
2017-07-20 21:06:25
阅读次数:
214