码迷,mamicode.com
首页 >  
搜索关键字:spark history    ( 9960个结果
Backbone.history.start
Backbone.history.start([options])当你的所有路由创建并且设置完毕后,调用Backbone.history.start()来开始监控hashchange事件,并且分配路由需要指出的是:如果想在你的应用中使用HTML5支持的pushState,可以用:Backbone.....
分类:其他好文   时间:2014-08-26 19:10:26    阅读次数:240
Spark:Master High Availability(HA)高可用配置的2种实现
Spark Standalone集群是Master-Slaves架构的集群模式,和大部分的Master-Slaves结构集群一样,存在着Master单点故障的问题。如何解决这个单点故障的问题,Spark提供了两种方案:基于文件系统的单点恢复(Single-Node Recovery with Loc...
分类:其他好文   时间:2014-08-26 19:00:56    阅读次数:567
oracle ash性能报告的使用方法
活动会话历史报告活动会话历史v$active_session_history视图提供了在实例级别抽取会话活动信息.活动会话每分钟会被抽样一次且被存储在sga中的循环缓冲区中.任何被连接到数据库且正等待一个不属于空闲等待事件的会话会被考虑是一个活动的会话.每个会话抽样都是一组行数据且通过v$activ...
分类:数据库   时间:2014-08-26 15:13:36    阅读次数:456
Spark任务调度executors分配问题 in yarn
红色留着继续思考。问题背景: CCSWYB ,在云平台上模拟shell流程,在各个节点上分配fvcom计算任务。Spark程序流程: 从HDFS中读取tasklist.txt(每一行对应一个任务) 经过一些操作过后生成一个JavaPairRDD ,记作data,对data执行foreac...
分类:其他好文   时间:2014-08-26 01:47:25    阅读次数:5885
web开发,让用户流水线进行操作,不可返回后退
在项目开发中很多人会有这样的需求,就是想要操作做过了不能后退,之前在网上找过点,都说没有什么好的办法,我有的说有js,但效果不好,不说连点两下可以让他失效,有不同浏览器中也无法兼容,如 function gogo(){ javascript:window.history.forward(1); } gogo(); 这段js代码加在html中可以在IE与google中有效,但到火狐中就失...
分类:Web程序   时间:2014-08-25 21:10:14    阅读次数:219
Apache Spark源码走读之22 -- Spark MLLib中拟牛顿法L-BFGS的源码实现
本文就拟牛顿法L-BFGS的由来做一个简要的回顾,然后就其在spark mllib中的实现进行源码走读。
分类:其他好文   时间:2014-08-25 20:55:34    阅读次数:2698
Spark教程-构建Spark集群-配置Hadoop伪分布模式并运行Wordcount示例(1)
第四步:配置Hadoop伪分布模式并运行Wordcount示例伪分布模式主要涉及一下的配置信息:修改Hadoop的核心配置文件core-site.xml,主要是配置HDFS的地址和端口号;修改Hadoop中HDFS的配置文件hdfs-site.xml,主要是配置replication;修改Hadoo...
分类:其他好文   时间:2014-08-25 16:51:54    阅读次数:267
spark hive结合杂记
1.下载spark源码,在spark源码目录下面有个make-distribution.sh文件,修改里面的参数,使编译后能支持hive,修改后执行该文件。(要预先安装好maven才能编译)。2.将编译好的spark源码部署到机器上,然后将hive/conf中的hive-site.xml拷贝到spa...
分类:其他好文   时间:2014-08-25 10:02:34    阅读次数:271
布局和容器
Spark和Halo(MX) Halo(MX)是Flex3独有的组件; Spark是Flex4引入的新一代组件; Flex4同时支持 Spark和Halo(MX); Spark容器允许改变布局算法; Halo(MX)组件则内置了不去算法,所以如果在Halo(MX)中,如果想使用另...
分类:其他好文   时间:2014-08-24 15:32:03    阅读次数:329
spark运行java-jar:Exception in thread "main" java.io.IOException: No FileSystem for scheme: hdfs
今天碰到的一个 spark问题,困扰好久才解决首先我的spark集群部署使用的部署包是官方提供的spark-1.0.2-bin-hadoop2.tgz部署在hadoop集群上。在运行java jar包的时候使用命令java -jar chinahadoop-1.0-SNAPSHOT.jar chin...
分类:编程语言   时间:2014-08-24 08:04:42    阅读次数:321
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!