一、如何执行 ./adapter.sh 20211121 'importdata.sh|!DATE' adapter.sh：适配器脚本 20201121：适配器脚本参数1，执行日期 'importdata.sh|!DATE'：适配器脚本参数2，具体需要执行的脚本和参数，以|分隔，多个参数也以|分隔 ...
分类：
系统相关 时间：
2021-06-19 18:59:41
阅读次数：
0
HDFS的读取过程 HDFS的读取流程大致有以下几个步骤： （1）客户端通过调用FileSystem对象的open()来打开希望读取的文件。对于HDFS平台来说，这个对象是DistributedFileSystem类的是一个实例，所以实际调用的是DistributedFileSystem对象的ope ...
分类：
其他好文 时间：
2021-06-19 18:42:26
阅读次数：
0
1.在/etc/init.d/创建你的脚本 cd /etc/init.d/ sudo vim add_static_route_to_34_52.sh 2.在脚本中按如下模板填写 注意### BEGIN INIT INFO和### END INIT INFO之间的都要写，后面有机会研究下为什么。 后 ...
分类：
系统相关 时间：
2021-06-19 18:41:17
阅读次数：
0
工程结构复杂，不方便查看结构目录怎么办？ shell帮你搞定，看看效果 解锁方式（Mac端） 1：通过Homebrew安装tree brew install tree 2、cd到目标目录下,执行tree命令 cd /xxx/x tree /xxx/x 就是这么简单，enjoy it🍺 ...
分类：
系统相关 时间：
2021-06-19 18:41:04
阅读次数：
0
简介： 最佳实践，以DLA为例子。DLA致力于帮助客户构建低成本、简单易用、弹性的数据平台，比传统Hadoop至少节约50%的成本。其中DLA Meta支持云上15+种数据数据源（OSS、HDFS、DB、DW）的统一视图，引入多租户、元数据发现，追求边际成本为0，免费提供使用。DLA Lakehou ...
分类：
其他好文 时间：
2021-06-18 20:06:29
阅读次数：
0
一、运行架构 Jenkins的kubernetes plugin在执行构建时会在kubernetes集群中自动创建一个Pod，并在Pod内部创建一个名为jnlp的容器，该容器会连接Jenkins并运行Agent程序，形成一个Jenkins的Master和Slave架构，然后Slave会执行构建脚本进 ...
分类：
其他好文 时间：
2021-06-18 20:01:37
阅读次数：
0
1、Badboy软件介绍 Badboy是一款免费的Web自动化测试工具，是用C++开发的动态应用测试工具。 其拥有强大的屏幕录制和回放功能，提供图形结果分析功能，刚好弥补了JMeter的不足之处。 所以再做Web测试时，使用这两个工具将是最佳组合。 同时Badboy提供了将录制好的Web测试脚本，可 ...
分类：
数据库 时间：
2021-06-18 19:44:04
阅读次数：
0
将数据从HDFS把文件导出到RDBMS数据库 导出前，目标表必须存在于目标数据库中。 默认操作是从将文件中的数据使用INSERT语句插入到表中 更新模式下，是生成UPDATE语句更新表数据 数据是在HDFS当中的如下目录/sqoop/emp，数据内容如下 1201,gopal,manager,500 ...
分类：
其他好文 时间：
2021-06-18 19:31:03
阅读次数：
0
1.断言是什么？ 断?, 是让程序判断预期结果与实际结果是否?致.简单的来说就是人为的设置一个值，对比接口返回的值和人为设置的值是否一样。 2.Postman断言的特点 Postman的断?是使?JavaScript语?编写的，写在‘Tests’标签?? Tests中的脚本在发送请求之后执?，会把断 ...
分类：
其他好文 时间：
2021-06-18 19:10:31
阅读次数：
0
原文链接： https://data-flair.training/blogs/data-locality-in-hadoop-mapreduce/ 1、什么是数据本地化 数据本地化（Data locality）是指将计算移动到数据所在的节点，而不是移动数据移动到计算所在的节点。在Hadoop中，一 ...
分类：
其他好文 时间：
2021-06-18 19:09:26
阅读次数：
0
