封装HttpClient 4.3.4 ,方便日后抓取数据,数据提交(待Cookie访问、302跳转访问):package util;import java.io.IOException;import java.util.ArrayList;import java.util.List;import j...
分类:
Web程序 时间:
2014-12-01 12:47:48
阅读次数:
238
Rsync在推送或抓取数据时,在rsync客户端会出现性能问题,负载比较大且数据量比较大的生产环境要注意这一点。本文只是个人平时配置示例,可以简单修改后用于实际环境使用,rsync不仅可以实现服务器间的复制,对于本地目录的同步也相当方便。1.linux平台rsync服务配置示例(1)客户..
分类:
其他好文 时间:
2014-11-23 08:11:14
阅读次数:
227
教你怎么去一个APP的网络数据,最重要的是,我们可以拿到我们想要的json数据,还在等什么,软件都给你准备好了...
分类:
移动开发 时间:
2014-11-11 22:52:47
阅读次数:
211
importjava.io.File;
importjava.util.concurrent.BlockingQueue;
importjava.util.concurrent.LinkedBlockingQueue;
importjava.util.concurrent.atomic.AtomicInteger;
/**
*多线程抓取数据的简单程序
*/
publicclassMultithreadFetcher{
/**阻塞队列的最大长度,防止内存..
分类:
编程语言 时间:
2014-11-06 20:19:21
阅读次数:
281
(2009-09-01 20:36:49)转载▼标签:杂谈分类:专业首先是tcpdump文件格式当你在Windows或者Linux环境下用tcpdump命令抓取数据包时,你将得到如下格式的tcpdump文件:文件头| 数据包头 | 链路层数据 | 数据包头 | 链路层数据 | 数据包头 | 链路层....
分类:
其他好文 时间:
2014-11-06 14:22:17
阅读次数:
482
今天,给系统改点数据,要从另一个表抓取数据更新到目标表,一般插入语句格式如下:Insert into Table2(field1,field2,...) select value1,value2,... from Table1 where ...但在imformix却不是这样竟然语法错误?好吧,改一...
分类:
数据库 时间:
2014-11-04 14:41:44
阅读次数:
445
前面把主要的东西讲完了,之后就是数据的获取和解析显示出来了,那接下来我们就负责抓取数据的这块吧,首先我们需要
在清单文件里加载服务和活动
添加:、
下面看看用户个人信息的抓取:
package com.neweriweibo.serv...
分类:
移动开发 时间:
2014-11-04 09:24:53
阅读次数:
297
PCAP是一个数据包抓取库, 很多软件都是用它来作为数据包抓取工具的。 WireShark也是用PCAP库来抓取数据包的。PCAP抓取出来的数据包并不是原始的网络字节流,而是对其进行从新组装,形成一种新的数据格式。一个用PCAP抓取的数据包的文件格式如下:Pcap文件头24B各字段说明:Magic:...
分类:
其他好文 时间:
2014-10-31 11:50:08
阅读次数:
211
开发文本编辑器可以用 sublime text
ftp客户端可以用 filezilla
远程连接ssh等用 xmanager(推荐,内带xftp,比较方便) sercureCRT也可以
写日志,记录平时网上看到的可以用evernote(在chrome和firefox中有剪藏的插件,非常方便)
抓取数据包用wireshark
抓取本地web访问可以用httpwatch
扫描端口那些还...
分类:
其他好文 时间:
2014-10-23 17:45:09
阅读次数:
256