码迷,mamicode.com
首页 >  
搜索关键字:spark jar包依赖 submit    ( 13476个结果
spark1.0属性配置以及spark-submit简单使用
在spark1.0中属性支持三种配置方式:1、代码在代码中构造SparkConf时指定master、appname或者key-value等val conf = new SparkConf();conf.setAppName("WordCount").setMaster(" spark://hadoo...
分类:其他好文   时间:2014-06-25 20:12:25    阅读次数:286
Spark MLlib之线性回归源码分析
线性回归(Linear Regression)问题属于监督学习(Supervised Learning)范畴,又称分类(Classification)或归纳学习(Inductive Learning);这类分析中训练数据集中给出的数据类标是确定的;机器学习的目标是,对于给定的一个训练数据集,通过不断的分析和学习产生一个联系属性集合和类标集合的分类函数(Classification Function)或预测函数(Prediction Function),这个函数称为分类模型(Classification Mo...
分类:其他好文   时间:2014-06-24 22:58:23    阅读次数:585
Learn ZYNQ (8)
在zed的PS端运行spark: (1)设置uboot为sd卡启动rootfs: "sdboot=if mmcinfo; then " \ "run uenvboot; " \ "echo Copying Linux from SD to RAM... && " \ ...
分类:其他好文   时间:2014-06-24 14:27:44    阅读次数:497
Spark
0、参考自http://tech.uc.cn/?p=2116 http://www.csdn.net/article/2013-07-08/2816149 1、Spark是一个高效的分布式计算系统。它基于MapReduce(MR)算法实现分布式计算,但Job的中间输出和结果可以保存在内存,从...
分类:其他好文   时间:2014-06-24 11:32:46    阅读次数:268
Spark1.0.0 编程模型
Spark Application可以在集群中并行运行,其关键是抽象出RDD的概念(详见RDD 细解),也使得Spark Application的开发变得简单明了。下图浓缩了Spark的编程模型。       1:Spark应用程序的结构       Spark应用程序可分两部分:driver部分和executor部分初始化SparkContext和主体程序 ...
分类:其他好文   时间:2014-06-22 21:48:06    阅读次数:311
bzoj 1874 取石子游戏 题解 & SG函数初探
【原题】 1874: [BeiJing2009 WinterCamp]取石子游戏 Time Limit: 5 Sec  Memory Limit: 162 MB Submit: 334  Solved: 122 [Submit][Status] Description 小H和小Z正在玩一个取石子游戏。 取石子游戏的规则是这样的,每个人每次可以从一堆石子中取出若干个石子,每次...
分类:其他好文   时间:2014-06-22 19:33:40    阅读次数:268
利用ajax异步处理POST表单中的数据
//防止页面进行跳转 $(document).ready(function(){   $("#submit").click(function(){    var str_data=$("#form1 input[type=text]").map(function(){       return ($(this).attr("name")+'='+$(this).val());    })...
分类:其他好文   时间:2014-06-22 16:04:47    阅读次数:200
BZOJ 3000(Big Number-Stirling公式求n!近似值)
3000: Big Number Time Limit: 2 Sec  Memory Limit: 128 MB Submit: 220  Solved: 62 [Submit][Status] Description 给你两个整数N和K,要求你输出N!的K进制的位数。 Input 有多组输入数据,每组输入数据各一行,每行两个数——N,K   Output ...
分类:其他好文   时间:2014-06-22 11:29:28    阅读次数:258
bzoj 3225: [Sdoi2008] 立方体覆盖 题解
【原题】 3225: [Sdoi2008]立方体覆盖 Time Limit: 2 Sec  Memory Limit: 128 MB Submit: 51  Solved: 36 [Submit][Status] Description   A君近日为准备省队选拔,特意进行了数据结构的专项训练。训练过程中就遇到了“矩形面积并”这道经典问题,即:给出N个各边与坐标轴平行(垂直...
分类:其他好文   时间:2014-06-22 00:18:40    阅读次数:299
spark未来的发展方向
spark 内存计算 分布式计算平台 Databricks...
分类:其他好文   时间:2014-06-21 21:23:20    阅读次数:319
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!