码迷,mamicode.com
首页 >  
搜索关键字:SPARK RDD    ( 7287个结果
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第四步)(6)
第一阶段:熟练的掌握Scala语言Spark框架是采用Scala语言编写的,精致而优雅。要想成为Spark高手,你就必须阅读Spark的源代码,就必须掌握Scala,;虽然说现在的Spark可以采用多语言Java、Python等进行应用程序开发,但是最快速的和支持最好的开发API依然并将永远是Sca...
分类:其他好文   时间:2014-09-24 11:07:36    阅读次数:305
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第四步)(6)
点击确认后出现如下视图: 点击“Restart”重新启动: 再次运行我们的第一个Scala程序: 发现我们完全使用了新的背景,同时正确运行了程序,与第一次运行相比,速度快了很多。
分类:其他好文   时间:2014-09-24 10:59:36    阅读次数:144
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第四步)(5)
此时把我们的“firstScalaApp”的源代码修改为如下内容:此时我们点击“firstScalaApp”的右键选择“RunScalaConsole”出现如下提示:这是由于我们还没有设置Java的JDK路径,点击“OK”,进入如下视图:此时我们选择最左侧的“Project”选项:此时我们选择“NoSDK”的“New”初..
分类:其他好文   时间:2014-09-23 13:39:05    阅读次数:196
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第四步)(5)
此时把我们的“firstScalaApp”的源代码修改为如下内容: 此时我们点击“firstScalaApp”的右键选择“Run Scala Console”出现如下提示: 这是由于我们还没有设置Java的JDK路径,点击“OK”,进入如下视图: 此时...
分类:其他好文   时间:2014-09-23 13:28:24    阅读次数:211
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第四步)(5)
此时把我们的“firstScalaApp”的源代码修改为如下内容:此时我们点击“firstScalaApp”的右键选择“Run Scala Console”出现如下提示:这是由于我们还没有设置Java的JDK路径,点击“OK”,进入如下视图:此时我们选择最左侧的“Project”选项:此时我们选择“...
分类:其他好文   时间:2014-09-23 12:51:14    阅读次数:185
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第四步)(4)
此时重启IDEA: 此时重启IDEA: 重启后进入如下界面: Step 4:在IDEA中编写Scala代码: ? 首先在进入在我们前一步的进入界面中选择“Create New Project”: 此时选在左侧列表中的“Scala”选项: 为了方便以后的...
分类:其他好文   时间:2014-09-22 16:38:33    阅读次数:217
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第四步)(4)
此时重启IDEA:此时重启IDEA:重启后进入如下界面:Step 4:在IDEA中编写Scala代码:首先在进入在我们前一步的进入界面中选择“Create New Project”:此时选在左侧列表中的“Scala”选项:为了方便以后的开发工作,我们选择右侧的“SBT”选项:点击“Next”进入下一...
分类:其他好文   时间:2014-09-22 12:25:02    阅读次数:190
Spark1.1.0 Actions
Actions The following table lists some of the common actions supported by Spark. Refer to the RDD API doc (Scala, Java, Python) and pair RDD functions doc (Scala, Java) for details. Ac...
分类:其他好文   时间:2014-09-21 03:39:19    阅读次数:279
Spark1.1.0 Transformations
Transformations The following table lists some of the common transformations supported by Spark. Refer to the RDD API doc (Scala, Java, Python) and pair RDD functions doc (Scala, Java) for deta...
分类:其他好文   时间:2014-09-21 03:05:49    阅读次数:305
Spark SQL UDF使用
spark sql udf编写及使用...
分类:数据库   时间:2014-09-19 19:24:15    阅读次数:361
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!