需要wget下载多个文件链接时,可以采用如下方法:1. 将链接存入文件url.list中;2. wget -bc -i url.list -o [log_file] -P [target_dir]其中,-b backgournd,即后台下载;-c continues,继续下载尚未完成的任务,即如.....
分类:
其他好文 时间:
2014-07-06 23:31:25
阅读次数:
221
sqoop是一个把关系型数据库数据抽向hadoop的工具。同时,也支持将hive、pig等查询的结果导入关系型数据库中存储。由于,笔者部署的hadoop版本是2.2.0,所以sqoop的版本是:sqoop-1.99.3-bin-hadoop2001、下载sqoop wget http://mirro...
分类:
其他好文 时间:
2014-07-06 15:37:41
阅读次数:
138
1、下载hive:wget http://mirrors.cnnic.cn/apache/hive/hive-0.12.0/hive-0.12.0.tar.gz2、解压hive安装文件 tar -zvxf hive-0.12.0.tar.gz3、配置hive环境变量,初始化hive在hdfs上的工作...
分类:
其他好文 时间:
2014-07-06 15:35:09
阅读次数:
146
function curlBy($url, $data=array()){ $ch = curl_init(); if(!empty($data)){ if (is_array($data) && $data) { $formdata = http_build_query($data); curl....
分类:
其他好文 时间:
2014-07-05 17:10:24
阅读次数:
228
最近在工作中需要开发一个Https接口,其不同于http、soap等协议,可以直接组织报文并发送,不存在加密,认证和获取密钥等安全操作。且之前开发的项目没有开发过这类接口,所以当时压力很大。通过网上查阅资料,要实现https接口,必须现在本机上安装openssl和curl(说明:只用op..
分类:
编程语言 时间:
2014-07-04 06:15:53
阅读次数:
362
首先下载源tar包可利用linux自带下载工具wget下载,如下所示:wget http://www.python.org/ftp/python/2.7.3/Python-2.7.3.tgz下载完成后到下载目录下,解压tar -zxvf Python-2.7.3.tgz进入解压缩后的文件夹cd Py...
分类:
编程语言 时间:
2014-07-03 22:29:41
阅读次数:
226
//设置PEM证书,pfx证书转pem方法:openssl pkcs12 -in 2000000501.pfx -out 2000000501.pem$cacert = ROOT_DIR."config/paykey/weixinss.pem";$ch = curl_init();curl_set....
分类:
Web程序 时间:
2014-07-03 21:19:52
阅读次数:
210
简述用于windows客户端的一个异步http模块的实现
1.需要实现的feature
1.1 很容易地发起异步http请求,然后回调。
1.2 能够管理http并发数。
1.3 能够支持http超时:不依赖于curl中实现的连接超时及其它超时。
1.4 请求可以取消。
2.参与者和简要分析:
Manager:接收http请求,调用curl。
Request:封装htt...
分类:
其他好文 时间:
2014-07-03 17:33:32
阅读次数:
316
php可以扮演资料的发送者。简单的get$ch=curl_init();
curl_setopt($ch,CURLOPT_URL,"http://SomeDomain/SamplePath?SomeVar=test");
curl_exec($ch);
curl_close($ch);2.简单的post$ch=curl_init();
curl_setopt($ch,CURLOPT_URL,"http://SomeDomain/SamplePath");
curl_setop..
分类:
Web程序 时间:
2014-07-03 14:14:49
阅读次数:
200
1.yum install lrzsz wget git2.安装gitosis:gitosis为Git用户权限管理系统,通过管理服务端的/home/git/.ssh/authorized_key文件来执行对用户权限的管理,是一个python模块包#yum install python python-...
分类:
其他好文 时间:
2014-07-03 12:41:36
阅读次数:
324