这个题目。。。。想上题意10935 Throwing cards away IGiven is an ordered deck of n cards numbered 1 to n with card 1 at the top and card n at the bottom. The follow...
分类：
其他好文 时间：
2015-07-16 23:55:35
阅读次数：
156
[oracle@oem ~]$ cd /oem/oms/oms/bin登录到oms中[oracle@oem bin]$ ./emcli login -username=sysmanEnter password :Login successful同步信息[oracle@oem bin]$ ./emcl...
分类：
数据库 时间：
2015-07-16 16:22:58
阅读次数：
177
自定义动画，需要新建一个类，继承Animation类。重写applyTransformation()方法和initialize()方法。applyTransformation(float interpolatedTime, Transformation t)方法中第一个参数：interpolated...
分类：
移动开发 时间：
2015-07-16 15:57:08
阅读次数：
123
处理数据类型为Value型的Transformation算子可以根据RDD变换算子的输入分区与输出分区关系分为以下几种类型:
1）输入分区与输出分区一对一型
2）输入分区与输出分区多对一型
3）输入分区与输出分区多对多型
4）输出分区为输入分区子集型
5）还有一种特殊的输入与输出分区一对一的算子类型：Cache型。 Cache算子对RDD分区进行缓存
输入分区与输出分区一...
分类：
其他好文 时间：
2015-07-12 00:23:05
阅读次数：
296
Spark算子的作用下图描述了Spark在运行转换中通过算子对RDD进行转换。 算子是RDD中定义的函数，可以对RDD中的数据进行转换和操作。 输入：在Spark程序运行中，数据从外部数据空间（如分布式存储：textFile读取HDFS等，parallelize方法输入Scala集合或数据）输入Spark，数据进入Spark运行时数据空间，转化为Spark中的数据块，通过BlockManager进行...
分类：
其他好文 时间：
2015-07-12 00:21:09
阅读次数：
151
Transformation处理的数据为Key-Value形式的算子大致可以分为：输入分区与输出分区一对一、聚集、连接操作。输入分区与输出分区一对一mapValuesmapValues：针对（Key，Value）型数据中的Value进行Map操作，而不对Key进行处理。
方框代表RDD分区。a=>a+2代表只对（ V1， 1）数据中的1进行加2操作，返回结果为3。源码： /**
* P...
分类：
其他好文 时间：
2015-07-12 00:20:08
阅读次数：
112
Zeppelin介绍Apache Zeppelin提供了web版的类似ipython的notebook，用于做数据分析和可视化。背后可以接入不同的数据处理引擎，包括spark, hive, tajo等，原生支持scala, java, shell, markdown等。它的整体展现和使用形式和Databricks Cloud是一样的，就是来自于当时的demo。Zeppelin可实现你所需要的：...
分类：
Web程序 时间：
2015-07-10 09:33:20
阅读次数：
257
仿射变换（Affine Transformation）齐次坐标系（Homogeneous Coordinate)定义：所谓线性变换是指两个线性空间的映射，一个变换是线性变换，必须满足两个条件，也就是我们经常说的线性条件： additivity homogeneity理解：在《3D数学基础：图形与.....
分类：
其他好文 时间：
2015-07-10 02:12:32
阅读次数：
343
Spark专用名词
RDD —- resillient distributed dataset 弹性分布式数据集
Operation —- 作用于RDD的各种操作分为transformation和action
Job —- 作业，一个JOB包含多个RDD及作用于相应RDD上的各种operation
Stage —- 一个作业分为多个阶段
Partition —- 数据分区， 一个RDD中的数据可以分...
分类：
其他好文 时间：
2015-07-08 16:41:59
阅读次数：
138
搭建 CentOS 6 服务器 - 目录博客分类：Linux (1) 安装CentOS ISO（desktop/minimal）、Cloud（AWS/阿里云）、Virtualization（VMWare、VirtualBox）详细内容(2) Linux常用命令 cd、ls、rm、chmod........
分类：
其他好文 时间：
2015-07-08 09:22:17
阅读次数：
122
