我们学习hadoop，最常见的编程是编写mapreduce程序，但是，有时候我们也会利用java程序做一些常见的hdfs操作。比如删除一个目录，新建一个文件，从本地上传一个文件到hdfs等，甚至是追加内容到hdfs文件中。 这里介绍一些常见的hdfs操作的java示例，帮助我们加深对hdfs的理解。 ...
分类：
编程语言 时间：
2021-01-19 11:58:35
阅读次数：
0
概述 在《性能测试工具选择策略--仿真度对比测评分析报告》一文详细分析了使用相同的web页面，分别使用LoadRunner,Jmeter,kylinTOP工具进行录制脚本并执行得出在静态请求页面下，Loadrunner12与kylinTOP的仿真能力都非常的高，接近真实场景。这次我们进一步分析，对于 ...
分类：
Web程序 时间：
2021-01-19 11:38:49
阅读次数：
0
传统微服务架构 在微服务模式下，企业内部服务少则几个到几十个，多则上百个，每个服务一般都以集群方式部署，这时自然产生两个问题： 一、服务发现：服务的消费方(Consumer)如何发现服务的提供方(Provider)？ 二、负载均衡：服务的消费方如何以某种负载均衡策略访问集群中的服务提供方实例？ 三种 ...
分类：
其他好文 时间：
2021-01-18 11:37:22
阅读次数：
0
Java泛型 Java1.5中引入泛型，允许在定义类、接口时，通过一个标识来表示类中某个属性的类型或是某个方法的返回值及参数类型。类型参数在使用时确定。 不使用泛型的问题 类型不安全 强制类型转换出错 集合中使用泛型 ArrayList<Integer> list = new ArrayList<> ...
分类：
编程语言 时间：
2021-01-18 11:30:29
阅读次数：
0
# 先定义dataframe各列的数据类型 from pyspark.sql.types import *schema = StructType([ StructField("a", NullType(), True), StructField("b", AtomicType(), True), S ...
分类：
其他好文 时间：
2021-01-18 11:29:36
阅读次数：
0
语法:select 函数，列(要求出现在group by的后面）from表【where筛选条件】group by分组的列表order by子句】注意:l查询列表必须特殊，要求是分组函数和group by后出现的字段 ...
分类：
数据库 时间：
2021-01-18 11:19:57
阅读次数：
0
<div style="display:inline-block;position:relative;"> <div style="position:absolute;right:2px;top:-2px;cursor:pointer;display:none;" class="input_clea ...
分类：
其他好文 时间：
2021-01-16 11:42:56
阅读次数：
0
1. 设置执行引擎 set hive.execution.engine=mr;set hive.execution.engine=spark; 如果设置执行引擎为MR，那么调用Hadoop的maprecude来运行需要执行的job的程序； 如果设置执行引擎为spark，那么就会调用spark来执行任 ...
分类：
其他好文 时间：
2021-01-15 12:15:21
阅读次数：
0
解决Hadoop HA集群 NameNode 无法自动故障转移（切换active） 在学习 HA 自动化配置，按照hadoop官网:https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HDFSHighAvaila ...
分类：
其他好文 时间：
2021-01-15 12:13:12
阅读次数：
0
1.django - templates - base.html <! my furst base html > <h3 style="margin:auto;width:50%;" >小萌信息技术开放职位</h3> <p> </p> <hr> {% block header %} <a href= ...
分类：
Web程序 时间：
2021-01-15 11:50:35
阅读次数：
0
