使用Spark读写HDFS中的parquet文件 文件夹中的parquet文件 build.sbt文件 Scala实现方法 ...
分类:
其他好文 时间:
2017-04-18 15:12:14
阅读次数:
2013
很多时候,我们需要对编写的程序进行打包,这个时候,我们可以借助一些项目构建工具,如maven, sbt, ant等,这里我使用的是maven。 打包成可执行有主类的jar包(jar包中无依赖) 以下是配置打包成可执行,带主类的jar包: But, 虽然现在把程序打包成了jar文件,也可以运行,但是, ...
分类:
编程语言 时间:
2017-04-16 21:10:55
阅读次数:
244
【模板】普通平衡树(Treap/SBT) 思路: 劳资敲了一个多星期; 劳资终于a了; 劳资一直不a是因为一个小错误; 劳资最后看的模板; 劳资现在很愤怒; 劳资不想谈思路!!! 来,上代码: ...
分类:
其他好文 时间:
2017-04-16 16:24:09
阅读次数:
297
1.筛法 2.平衡树——sbt 3.线段树——加法和乘法标签 ...
分类:
其他好文 时间:
2017-04-15 15:43:35
阅读次数:
138
1.使用Spark读取MySQL中某个表中的信息 build.sbt文件 Mysql.scala文件 输出 2.使用Spark写MySQL中某个表中的信息 ...
分类:
数据库 时间:
2017-04-13 10:13:55
阅读次数:
323
Scala的内建控制结构包括:if、while、for、try、match和函数调用 1.if表达式 2.while循环,while循环和其他语言的一样,有while和do while Scala中对再次赋值语句的返回值是Unit,比如下面这个例子 3.for表达式 4.使用try表达式处理异常 抛 ...
分类:
其他好文 时间:
2017-04-04 23:19:51
阅读次数:
178
准备:1.ubuntu操作系统2.百度一下 IDEA, 到官网下载IDEA安装包 下载完成解压到指定目录下如:tar -zxvf xxx,xxx -C /opt/idea运行/optt/idea/xxx/bin/idea.sh如: 这个过程中可以选择安装 scala sbt 开始: 3.sbt up ...
分类:
其他好文 时间:
2017-03-27 11:20:24
阅读次数:
148
显然,我是在说Scala项目。在我们讨论这个话题时,SBT的稳定版本是0.13,我想再过几年,本文提及的问题会一一得到解决,从而让SBT成为一个真正成熟强大的构建工具。在我们目前开发的系统中,有一个基...
分类:
其他好文 时间:
2017-02-27 12:02:09
阅读次数:
390
题意:开始时给定一个空的数列,要求维护:1、加入一个数 2、数列中所有元素+k 3、数列中所有元素-k 4、查询数列中的第k大。其中对于任意时刻,如果有一个元素<Min,则删除该元素。 题解:平衡树裸题……话说当年还打算把Splay Treap SBT都学一下,结果现在只会Splay了QAQ #in ...
分类:
其他好文 时间:
2017-02-26 14:11:23
阅读次数:
218