1 RDD基础知识 1.1 Spark的RDD五大特性 1.1.1 A list of partitions RDD是一个由多个partition(某个节点里的某一片连续的数据)组成的的List;将数据加载为RDD时,一般一个hdfs里的block会加载为一个partition。 对于RDD来说,每 ...
分类:
其他好文 时间:
2021-01-25 11:30:09
阅读次数:
0
Linux日志 1、常见日志 /var/log/message 系统启动后的信息和错误日志,是Red Hat Linux中最常用的日志之一 /var/log/secure 与安全相关的日志信息 /var/log/maillog 与邮件相关的日志信息 /var/log/cron 与定时任务相关的日志信 ...
分类:
系统相关 时间:
2021-01-25 10:54:55
阅读次数:
0
上传参数名解析:明确哪些参数名可以修改 content-Disposition:一般可更改(from-data)接受表单的数据 name:表单参数值,不能更改 filename:文件名,可以更改 connect-Type:文件MIME,试情况而定 常见绕过方法 数据溢出-防止匹配(xxx...) 也 ...
分类:
Web程序 时间:
2021-01-25 10:53:05
阅读次数:
0
1、保留小数点后两位 >>> print("{:.2f}".format(3.1415)) 3.14 2、带符号保留小数点后两位 >>> print("{:+.2f}".format(-3.1415)) -3.14 3、不带小数点 >>> print('{:.0f}'.format(2.7)) 3 ...
分类:
其他好文 时间:
2021-01-25 10:46:13
阅读次数:
0
LCD时序是指对LCD显示模块进行读写时电路的时序要求和状态.一般显示模块的外部接口采用并行方式,其读写时序常见的有以下两种模式:Intel8080时序和6800时序时序,今天主要介绍8080时序。 图1 8080接口写命令时序 信号线 ILI9341对应的信号线 说明 LCD_DB[15:0] D ...
分类:
其他好文 时间:
2021-01-22 12:06:12
阅读次数:
0
最近看一个新系统,发现里面有很多场景用到唯一id,便搜罗了一下常见的方案。 对于分布式id,需要满足下面的基本要求 全局唯一 趋势递增 1. UUID UUID(Universally Unique Identifier)全局唯一标识符,定义为一个字符串主键,采用32位数字组成,编码采用16进制,定 ...
分类:
其他好文 时间:
2021-01-21 10:48:34
阅读次数:
0
git常用命令总结 git配置相关命令 配置相关的命令都使用git config开始。详细请参看git config --help.常用到的git配置命令如下: 查看git所有配置项 git config -l或git config --list 直接修改配置文件 git config -e --g ...
分类:
其他好文 时间:
2021-01-21 10:48:15
阅读次数:
0
1.日期时间处理类 JDK8通过发布新的Date-Time API(JSR 310)来进一步加强对日期与时间的处理 新增了很多常见的API,如日期/时间的比较,加减,格式化等 包所在位置java.time 核心类 LocalDate:日期 LocalTime:时间 LocalDateTime:日期时 ...
分类:
其他好文 时间:
2021-01-21 10:37:20
阅读次数:
0
一、问题描述 平时我们项目中基本上用的都是GET/POST请求方法,其他的方法是很少用到的,如PUT/DELETE/HEAD/OPTIONS/TRACE,不关闭这些HTTP请求方法,是常见的web漏洞之一。 二、解决办法 把他们关闭即可!!! 添加以下节点代码到web.xml配置文件当中。可以在项目 ...
分类:
Web程序 时间:
2021-01-20 12:15:41
阅读次数:
0
我们学习hadoop,最常见的编程是编写mapreduce程序,但是,有时候我们也会利用java程序做一些常见的hdfs操作。比如删除一个目录,新建一个文件,从本地上传一个文件到hdfs等,甚至是追加内容到hdfs文件中。 这里介绍一些常见的hdfs操作的java示例,帮助我们加深对hdfs的理解。 ...
分类:
编程语言 时间:
2021-01-19 11:58:35
阅读次数:
0