准备：1. 规划3个集群节点:hosts主机都已经配置好映射，映射主机名分别为master,slave1,slave2,且已经进行ssh免密配置，确保端口互通，防火墙关闭 2. 先安装好scala(参考：https://www.cnblogs.com/sea520/p/13518158.html) ...
分类：
其他好文 时间：
2021-06-19 19:11:31
阅读次数：
0
前言# 因为docker的跨平台，所以使用docker搭建自己的数据库非常方便 代码# 代码示例目录结构# docker-compose.yaml# Copy version: '3' services: redis: image: redis container_name: docker_redi ...
分类：
其他好文 时间：
2021-06-19 19:05:02
阅读次数：
0
转自：https://blog.csdn.net/qq_25062299/article/details/95592877 ...
分类：
其他好文 时间：
2021-06-19 19:00:51
阅读次数：
0
redis学习 五大数据类型，开发必会的技能 老师的博客 https://www.cnblogs.com/pyyu/p/9467279.html string，字符串类型 hash，哈希类型，如同python的dict Set，无序集合 Zset，有序集合 List，双向队列，向左插入数据，向右插入 ...
分类：
其他好文 时间：
2021-06-19 18:53:25
阅读次数：
0
HDFS的读取过程 HDFS的读取流程大致有以下几个步骤： （1）客户端通过调用FileSystem对象的open()来打开希望读取的文件。对于HDFS平台来说，这个对象是DistributedFileSystem类的是一个实例，所以实际调用的是DistributedFileSystem对象的ope ...
分类：
其他好文 时间：
2021-06-19 18:42:26
阅读次数：
0
简介： 最佳实践，以DLA为例子。DLA致力于帮助客户构建低成本、简单易用、弹性的数据平台，比传统Hadoop至少节约50%的成本。其中DLA Meta支持云上15+种数据数据源（OSS、HDFS、DB、DW）的统一视图，引入多租户、元数据发现，追求边际成本为0，免费提供使用。DLA Lakehou ...
分类：
其他好文 时间：
2021-06-18 20:06:29
阅读次数：
0
一、运行架构 Jenkins的kubernetes plugin在执行构建时会在kubernetes集群中自动创建一个Pod，并在Pod内部创建一个名为jnlp的容器，该容器会连接Jenkins并运行Agent程序，形成一个Jenkins的Master和Slave架构，然后Slave会执行构建脚本进 ...
分类：
其他好文 时间：
2021-06-18 20:01:37
阅读次数：
0
#更新yum软件管理器 yum -y update #安装docker yum install -y docker 2.配置docker 加速器 curl -sSL https://get.daocloud.io/daotools/set_mirror.sh | sh -s http://f1361 ...
分类：
其他好文 时间：
2021-06-18 20:01:26
阅读次数：
0
将数据从HDFS把文件导出到RDBMS数据库 导出前，目标表必须存在于目标数据库中。 默认操作是从将文件中的数据使用INSERT语句插入到表中 更新模式下，是生成UPDATE语句更新表数据 数据是在HDFS当中的如下目录/sqoop/emp，数据内容如下 1201,gopal,manager,500 ...
分类：
其他好文 时间：
2021-06-18 19:31:03
阅读次数：
0
yum 更新 # yum 包更新到最新 yum update 安装需要的软件包 # 安装需要的软件包， yum-util 提供yum-config-manager功能，另外两个是devicemapper驱动依赖的 yum install -y yum-utils device-mapper-pers ...
分类：
其他好文 时间：
2021-06-18 19:09:40
阅读次数：
0
