spark-submit \--name SparkSubmit_Demo \--class com.luogankun.spark.WordCount \--master yarn-client \--executor-memory 1G \--total-executor-cores 1 \/h...
分类:
其他好文 时间:
2014-07-16 21:09:32
阅读次数:
260
DOM编程1、为什么要学习DOM(1) 通过dom编程,我们可以写出各种网页游戏(2)dom编程也是ajax的重要基础2、DOM编程介绍DOM = Document Object Model(文档对象模型)DOM是HTML与XML的应用编程接口(API)BOM和DOM相辅相成的关系BOM为纲,DOM...
分类:
编程语言 时间:
2014-07-16 21:07:21
阅读次数:
270
spark jdbc分支源码下载地址 https://github.com/apache/spark/tree/branch-1.0-jdbc编译spark jdbc ./make-distribution.sh --hadoop 2.3.0-cdh5.0.0 --with-yarn --wit.....
分类:
数据库 时间:
2014-07-16 21:04:35
阅读次数:
306
Spark Standalone模式常见的HA部署方式有两种:基于文件系统的HA和基于ZK的HA本篇只介绍基于ZK的HA环境搭建:$SPARK_HOME/conf/spark-env.sh添加SPARK_DAEMON_JAVA_OPTS的配置信息:export SPARK_DAEMON_JAVA_O...
分类:
其他好文 时间:
2014-07-16 20:27:12
阅读次数:
187
从源代码的角度来看一下Spark SQL的核心执行流程吧...
分类:
数据库 时间:
2014-07-12 21:07:32
阅读次数:
299
古有windows,今有GNU Linux,那么如何清理GNU Linux下的垃圾呢?为了释放那可以存片的空间 整理了一下,大概从以下的方面进行着手,若客观有其它的补充的欢迎评论添加指正,以下列出的若没有以/根目录开始的,都是从当前用户的家(home)目录开始的,切记:
注意:
以下的#号表示注释:_(
#user_homedir/bash_history
bash_histor...
分类:
系统相关 时间:
2014-07-12 17:32:38
阅读次数:
223
Truck History
Time Limit: 2000MS
Memory Limit: 65536K
Total Submissions: 17275
Accepted: 6623
Description
Advanced Cargo Movement, Ltd. uses trucks of different typ...
分类:
其他好文 时间:
2014-07-10 23:51:01
阅读次数:
266
History Grading
Background
Many problems in Computer Science involve maximizing some measure according to constraints.
Consider a history exam in which students are asked to put seve...
分类:
其他好文 时间:
2014-07-10 23:04:32
阅读次数:
340
http://ns.adobe.com/mxml/2009"
xmlns:s="library://ns.adobe.com/flex/spark"
xmlns:mx="library://ns.adobe.com/flex/mx" xmlns:supportClasses="com.esri.ags.skins.supportClasses.*" minWidth...
概述
最近工作上忙死了……广播变量这一块其实早就看过了,一直没有贴出来。
本文基于Spark 1.0源码分析,主要探讨广播变量的初始化、创建、读取以及清除。
类关系
BroadcastManager类中包含一个BroadcastFactory对象的引用。大部分操作通过调用BroadcastFactory中的方法来实现。
BroadcastFactory是一个Trait,有两个直接子...
分类:
其他好文 时间:
2014-07-10 19:43:49
阅读次数:
298