一、概念 主成分分析(Principal Component Analysis)是指将多个变量通过线性变换以选出较少数重要变量的一种多元统计分析方法,又称为主成分分析。在实际应用场合中,为了全面分析问题,往往提出很多与此有关的变量(或因素),因为每个变量都在不同程度上反映这个应用场合的某些信息。 主 ...
分类:
编程语言 时间:
2020-06-07 01:00:18
阅读次数:
92
GrapeCityDocumentsforExcel(GcExcel)是一款服务端JavaExcel组件,产品架构轻量灵活,无需Office组件依赖,结合纯前端表格控件SpreadJS,在前端呈现Excel的数据可视化效果,实现类Excel的功能布局、数据分析和交互;在服务端实现批量创建、加载、编辑、导入/导出大型Excel文档,为您的应用程序提供Excel全栈、全场景解决方案。GcExcel对操
分类:
Web程序 时间:
2020-06-03 09:18:54
阅读次数:
71
题目传送门 A. Park Lighting #include <bits/stdc++.h> using namespace std; typedef long long ll; #define rep(i, a, b) for (register int i = a; i <= b; i++) ...
分类:
其他好文 时间:
2020-05-31 14:30:38
阅读次数:
584
Spark对数据的核心抽象——弹性分布式数据集(Resilient Distributed Dataset),简称RDD。RDD其实就是分布式的元素集合。在Spark中,对数据的所有操作不外乎创建RDD、转化已有RDD以及调用RDD操作进行求值。而在这背后,Spark会自动将RDD中的数据分发到集群 ...
分类:
其他好文 时间:
2020-05-30 22:18:13
阅读次数:
105
1. 已知对象去除固定的key及其对应的value 例:将下面obj对象中的name去掉 var obj = {'name':'lxh','hobby':'running','address':'software park'} 命令 delete obj['name'] ...
分类:
Web程序 时间:
2020-05-29 21:39:48
阅读次数:
70
https://codeforces.com/contest/1358 A. Park Lighting 输出 \(\lceil \dfrac{ab}2 \rceil\) #include <bits/stdc++.h> using namespace std; #define repeat(i,a ...
分类:
其他好文 时间:
2020-05-27 01:24:40
阅读次数:
103
跑spark job的时候碰到了错误: 这是因为nmPrivate目录没有权限访问引起的。 参考: "https://www.oschina.net/question/2288283_2134188" ...
分类:
其他好文 时间:
2020-05-25 09:22:14
阅读次数:
74
api代码示例入下 object DataFrameCase { def main(args: Array[String]): Unit = { val sparksession = SparkSession.builder().appName("DataFrameCase").master("lo ...
Job的划分 1、Application : 应用,创建一个SparkContext可以认为创建了一个Application 2、Job 在一个app中每执行一次行动算子 就会创建一个Job,一个application会有多个job 3、stage 阶段,每碰到一个shuffle算子,会产生一个新的 ...
分类:
其他好文 时间:
2020-05-11 23:56:54
阅读次数:
213
spark sql使用自己封装的livy 引擎执行时有丢失数据情况。排查发现livy session页面中的sql有中文乱码。 之后在livy 源码中未找到相关序列化指定字符集的代码。回头排查自己的代码 修改完毕后重新执行 观察livy session中的sql。 果然乱码没了,执行结果集跟spar ...
分类:
Web程序 时间:
2020-05-09 16:39:29
阅读次数:
91