1.下载 https://hadoop.apache.org/releases.html 2.上传到linux scp hadoop-3.0.3.tar.gz XJ@192.168.109.101:~/installPack/hadoop-3.0.3.tar.gz 3.解包 tar -zxvf ha ...
分类:
其他好文 时间:
2018-11-22 23:53:59
阅读次数:
263
一、问题描述 存在问题: 深圳的采集机MQ程序无法与应用服务器进行通讯,表现为:获取小数据时正常,获取大数据时超时 场景图如下 存在问题: 深圳的采集机MQ程序无法与应用服务器进行通讯,表现为:获取小数据时正常,获取大数据时超时 进一步排查,使用公共的工具(ftp/scp)从应用服务器下载数据下载不 ...
分类:
其他好文 时间:
2018-11-22 02:49:35
阅读次数:
1897
爬虫爬取网站信息1 需要用到的库 -requests -bs42 流程 1通过requests发送get请求,这里请求包括url和user-agent 2通过beautifulsoup将response转换成lxml格式 3通过soup.select查找需要的数据,是一个列表的形式,可以同归索引取值 ...
分类:
其他好文 时间:
2018-11-20 13:30:08
阅读次数:
155
scp原理 scp是rcp(remote file copy)在ssh上面的实现,rcp和scp在协议层面上没有区别, 不同在于传输时使用了rlogin。 scp会先解析命令行参数,然后打开一个到远程服务器的连接, 再通过这个连接在远程另起一个scp进程。远程的scp进程可以是源端,也可以是目的地( ...
分类:
系统相关 时间:
2018-11-19 11:03:34
阅读次数:
348
首先登入一台linux服务器做为母机(即登入其他linux系统用这台做为入口);执行一行命令生成key文件:ssh-keygen -t rsa 首先登入一台linux服务器做为母机(即登入其他linux系统用这台做为入口);执行一行命令生成key文件:ssh-keygen -t rsa 2.在母机上 ...
分类:
系统相关 时间:
2018-11-17 16:41:18
阅读次数:
201
基本命令——来源于马哥教育官网
1.cut
: cat /etc/passwd | cut -d’:’ -f7| uniq -c| sort -nr
2.authconfig 修改加密方式
–passalgo=sha256 — update
3.scp 上传文件
-r dir ip:path 传目录
file ip:path传文件
-P port 指定端口
4.rsync 同步文件
-avz 源文件 ip:path
scp和rsync都是基于ssh协议
分类:
系统相关 时间:
2018-11-16 15:03:07
阅读次数:
204
JavaScript基础(一) JavaScript是一种弱类型的脚本语言; var a = 3; (变量声明之前必须用var声明,编程规范!) 变量的命名规范: ...
分类:
编程语言 时间:
2018-11-16 13:21:14
阅读次数:
173
目标 关机/重启 shutdown 查看或配置网卡信息 ifconfig ping 远程登录和复制文件 ssh scp shutdown ifconfig ping ssh scp 01. 关机/重启 1.1 shutdown shutdown 命令可以 安全 关闭 或者 重新启动系统 提示: 不指 ...
分类:
系统相关 时间:
2018-11-15 22:24:46
阅读次数:
210
Spark是一个基于内存的计算框架,本文主要是介绍Spark的独立部署。 ...
分类:
其他好文 时间:
2018-11-14 14:30:38
阅读次数:
206
scp是 secure copy的缩写, scp是linux系统下基于ssh登陆进行安全的远程文件拷贝命令 scp -r /var/lib/sunmnet_app/src/mz_web 172.16.4.71:/var/lib/sunmnet_app/src ***********scp -r 本机 ...
分类:
系统相关 时间:
2018-11-13 20:37:06
阅读次数:
149