码迷,mamicode.com
首页 >  
搜索关键字:scala bigdata 大數據 spark    ( 10680个结果
Scala入门
Scala是一门混合了函数式和面向对象的语言。Scala运行在JVM上,在Scala中你可以直接使用Java API,并且你还可以享受到Scala所带来的便捷,尤其是在多线程应用中。你应该首先安装JDK,然后下载Scala,开发工具推荐intelli J,你用eclipse也可以。首先看第一个Sca...
分类:其他好文   时间:2014-08-22 00:15:45    阅读次数:329
Spark分析之Dependency
在Spark中,每一个RDD是对于数据集在某一状态下的表现形式,比如说:map、filter、group by等都算一次操作,这个状态有可能是从前一状态转换而来的;因此换句话说一个RDD可能与之前的RDD(s)有依赖关系;RDD之间存在依赖关系;根据依赖关系的不同,可以将RDD分成两种不同的类型:宽...
分类:其他好文   时间:2014-08-21 16:39:14    阅读次数:223
【互动问答分享】第8期决胜云计算大数据时代Spark亚太研究院公益大讲堂
Spark亚太研究院100期公益大讲堂 【第8期互动问答分享】
分类:其他好文   时间:2014-08-21 13:04:34    阅读次数:214
scala ActorSyetem异常
Exception in thread "main" java.lang.NoSuchMethodError: scala.collection.immutable.HashSet$.empty()Lscala/collection/immutable/HashSet; at akka.actor.ActorCell$.(ActorCell.scala:336) at akka.actor.Act...
分类:其他好文   时间:2014-08-20 22:41:43    阅读次数:982
Scala继承
类型检查和转换 要测试某个对象是否属于某个给定的类,可以使用isInstanceOf方法,如果测试成功,你可以用asInstanceOf方法将引用转换为子类的引用 if(p.isInstanceOf[Employee]){ val s = p.asInstanceOf[Employee] } 如果想测试p指向的是一个Employee对象但又不是其子类,...
分类:其他好文   时间:2014-08-20 21:10:32    阅读次数:350
在myeclipse中使用Java语言进行spark Standalone模式应用程序开发
一.环境配置Myeclipse中虽然已经集成了maven插件,但是由于这个插件版本较低,建立maven project会出现错误。解决办法:自己到官网http://maven.apache.org/下载最新版本的maven插件,解压,在环境变量中注册。新建环境变量M2_HOME在PATH里加入mav...
分类:编程语言   时间:2014-08-20 20:59:12    阅读次数:279
我谈Scala--Scala菜鸟的初见
近来Scala的名气很大,但是它真的有这么好的,就我所见,非也。Scala的名气掩盖了它的不足,使得好多人没有看到它的缺点,虽然它是一门函数式编程语言,但是给我的整体感觉就是混乱和不统一,为了不同而不同,难道必须要和其他的语言不同,才能显示出你的优秀吗?要知道,Java乃是经受了二十多年的考验,它的诸多之处难道不值得你去借鉴吗?你非要搞的标新立异,处处与常规所背,是要显示你优秀的设计思想吗?可在我...
分类:其他好文   时间:2014-08-20 16:33:22    阅读次数:179
Scala包和引入
包 在Scala中,包的作用域和其他作用域一样地支持嵌套,在下一层作用域中可以访问上一层作用域中的名称。 package com { package horstmann { object Utils { def percentOf(value: Double, rate: Double) = value * rate / 100 } package impatient { ...
分类:其他好文   时间:2014-08-20 14:12:42    阅读次数:177
更改Scala的代码自动补全快捷键code completion
使用Eclipse的代码补全快捷键alt+/已经习惯了,但是IntelJIDEA中这个快捷键组合没有效果,那么我们来修改之,按ctrl+alt+s打开设置界面 之后在keymaps中选择Eclipse即可,那么下面就要来修改了,在右上角的搜索框中输入completion,在MainMenu中可以找到 选中Basic那一行,右击,选择Add Keyboard Shortcut,在这个窗口...
分类:其他好文   时间:2014-08-20 01:26:36    阅读次数:260
centOS 64位下编译hadoop2.4.1
1. 安装JDK a.      解压jdk [bigdata001@Yuxi software]$ tar -xvzf jdk-7u60-linux-x64.tar.gz b.      设置环境变量 PATH=$PATH:$HOME/bin export JAVA_HOME=/home/bigdata001/BigDataPlatform/jdk1.7.0_60 export JAVA...
分类:其他好文   时间:2014-08-19 20:53:05    阅读次数:324
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!