Spark源码编译官方文档:https://spark.apache.org/docs/latest/building-spark.html用于编译源码的机器最好满足如下配置:CPU>=4核内存>=8G首先安装好JDK、Scala和Maven,由于安装都比较简单,本文就不演示了,我这里使用的JDK、Scala和Maven版本如下:[root@spark01~]#java-version
分类:
其他好文 时间:
2020-10-27 11:54:44
阅读次数:
43
草捏子最近开始学习Kafka。在学习前,给自己确定了下学习的范围,大致如下:理解Kafka的相关概念;掌握Kafka的基本API使用;了解Kafka的背后原理。后续将在这学习范围内输出一些相关文章。那么本文作为Kafka系列的第一篇文章,将从“理解Kafka的相关概念”说起。首先Kafka是什么。Kafka起初是由LinkedIn公司采用Scala语言开发的一个多分区、多副本且基于ZooKeepe
分类:
其他好文 时间:
2020-10-27 11:52:25
阅读次数:
31
以下操作在maven正确安装前提下进行 1、在eclipse中配置maven Perferences——>Maven——>User Settings,进行如下配置 2、创建Maven web项目 a、找到maven project b、勾选simple-project 3、填写项目相关信息 需要注意 ...
分类:
Web程序 时间:
2020-10-26 11:25:31
阅读次数:
42
package test /** * scala中的:: , +:, :+, :::, +++, 等操作; */ object listTest { def main(args: Array[String]): Unit = { val list = List(1,2,3) // :: 用于的是向队 ...
分类:
其他好文 时间:
2020-10-26 11:23:59
阅读次数:
20
在Scala中,元组是一个包含了固定数量的元素的值,且每个元素都有自己的类型。元组是不可变的。 元组特别适用于一个方法返回多个值的场景。 一个二元元组可以按如下方式创建: val ingredient = ("Sugar" , 25) 这个元组包含了一个 String 类型的元素和一个 Int 类型 ...
分类:
编程语言 时间:
2020-10-24 11:54:27
阅读次数:
42
开发环境: 操作系统:Windows10或Linux 均可(我都在用) JDK版本:RedHat OpenJDK11 JavaFX版本:JavaFX15(当前稳定版)或JavaFX11.0.2 Maven版本:Maven3.6.3(Maven版本不挑) IDE:Eclipse或IDEA社区版 JDK ...
分类:
编程语言 时间:
2020-10-22 22:50:05
阅读次数:
44
eclipse和idea的快捷键比较及idea如何调节eclipse的快捷键最近在调整使用idea,由于之前一直使用的都是eclipse,突然不太适应,特别是在快捷键的使用上,所以在空闲时间将二者的快捷键进行查询并比较,特此写此篇随笔,希望对大家有所帮助,由于新手上路,有错误的地方希望大家批评指正。话不多说,直接进入,让我们看看eclipse和idea的快捷键的区别吧。表格如下:功能IDEA
分类:
系统相关 时间:
2020-10-22 22:31:23
阅读次数:
34
剪辑自: https://blog.csdn.net/u010051887/article/details/52020485 大家在操作前建议先看看评论区网友的回复。我不是专业做开发的,当时只关注了问题最终的处理,没有深入研究成因。 测试环境需要自己维护,某天同步代码的时候遇到checkout co ...
分类:
系统相关 时间:
2020-10-18 09:21:48
阅读次数:
32
在上一章中SpringBoot整合RabbitMQ,已经详细介绍了消息队列的作用,这一种我们直接来学习SpringBoot如何整合kafka发送消息。 kafka简介 kafka是用Scala和Java语言开发的,高吞吐量的分布式消息中间件。高吞吐量使它在大数据领域具有天然的优势,被广泛用来记录日志 ...
分类:
编程语言 时间:
2020-10-13 17:35:42
阅读次数:
33