Spark文档阅读之Programming Guides - Quick Start。学习spark-shell任务提交方法和独立spark任务的创建和提交执行。 ...
分类：
其他好文 时间：
2020-06-15 20:41:53
阅读次数：
51
一句话概括： 需要执行的命令保存到文本中，按照顺序执行，因为是解释型的，不需要编译 准确叙述： 若干命令+脚本的基本格式+脚本特定语法+思想=shell脚本 脚本的基本写法： 1.脚本第一行 /bin/bash 表示以下内容使用bash解释器 2.脚本的第二部分,注释（#）说明，就脚本的基本信息进行 ...
分类：
系统相关 时间：
2020-06-15 17:46:41
阅读次数：
70
1.全局安装（官网不推荐） 2.指定目录运行，如：node_modules/.bin/webpack（找不到webpack命令是因为系统环境变量的原因） 3.自定义shell命令：alias webpack="node_modules/.bin/webpack",之后再用webpack命令 ...
分类：
Web程序 时间：
2020-06-15 17:35:53
阅读次数：
188
1.使用os.system()去调用，但是只能返回执行状态，不能获取shell cmd执行结果 #!/usr/bin/python # -*- coding: utf-8 import os status = os.system("ps aux |grep Xcode |grep -v grep") ...
分类：
编程语言 时间：
2020-06-15 16:12:20
阅读次数：
73
Centos7间文件传输 Centos间文件传输基于SSH协议，那什么是SSH呢？ 1、SSH是什么？ SSH ：是Secure Shell的缩写，是建立在应用程和传输层基础上的安全协议； 传统的网络服务程序，如FTP、POP和Telnet本质上是不安全的， 使用明文的方式在网络上传输数据、账号和口 ...
分类：
其他好文 时间：
2020-06-15 16:11:16
阅读次数：
128
#/bin/bash#使用date取得当前系统时间d=`date+%F`dir=/tmp/data/logs#判断目录是存在[-d$dir]||mkdir-p$direcho"$dlogs">$dir/$d.logdf-h>>$dir/$d.logfind$dir/-mtime+15|xargsrm>/dev/null2>&1
分类：
系统相关 时间：
2020-06-15 15:39:32
阅读次数：
65
D29 我们可以将awk的起源追溯到sed和grep，并且经由sed和greap再追溯到ed（最初的Unix行编辑器）。接下来会发现awk和sed有很多相似之处。 1. awk简介 awk被设计用于文本处理，并通常被用作数据提取和报告工具的解释性程序语言。 awk为处理文件提供了更普遍的计算模型。 ...
分类：
系统相关 时间：
2020-06-15 12:16:51
阅读次数：
86
在shell中字符串与数值的比较方法是不同的，要注意区分整数比较： -eq 等于,如:if [ "$a" -eq "$b" ] -ne 不等于,如:if [ "$a" -ne "$b" ] -gt 大于,如:if [ "$a" -gt "$b" ] -ge 大于等于,如:if [ "$a" -ge ...
分类：
系统相关 时间：
2020-06-15 11:57:25
阅读次数：
80
docker的父镜像中定义了一个环境变量，我们的镜像在启动命令中需要用到这个环境变量。但是不加双引号时总是报错，报找不到java的启动类，加上双引号就不报错了。 父镜像中定义的变量：$xxx_CMD = -Xdump:tool:events=systhrow,opts=ASYNC,filter=ja ...
分类：
系统相关 时间：
2020-06-14 23:59:50
阅读次数：
121
一、基础知识点 1、单引号双引号的区别：单引号不解释变量。 2、<< 的使用：这个的作用好像是与外面的指令交互的作用， #! /user/bin/bash # 用来对进入fdisk后的交互操作 fdisk /dev/sbd <<EOF n p 3 EOF #EOF代表的是括号 3、数学运算 1、ex ...
分类：
系统相关 时间：
2020-06-14 23:59:18
阅读次数：
119
