文章目录 5.1 HBase简介 什么是HBase BigTable 面向列的数据库 什么是非结构化数据存储 HBase在Hadoop生态中的地位 HBase与HDFS HBase使用场景 5.1 HBase简介 1 什么是HBase HBase是一个分布式的、面向列的开源数据库 HBase是Goo ...
分类：
数据库 时间：
2021-01-19 12:02:43
阅读次数：
0
我们学习hadoop，最常见的编程是编写mapreduce程序，但是，有时候我们也会利用java程序做一些常见的hdfs操作。比如删除一个目录，新建一个文件，从本地上传一个文件到hdfs等，甚至是追加内容到hdfs文件中。 这里介绍一些常见的hdfs操作的java示例，帮助我们加深对hdfs的理解。 ...
分类：
编程语言 时间：
2021-01-19 11:58:35
阅读次数：
0
2、第一个Mybatis程序 思路：搭建环境 >导入Mybatis >编写代码 >测试！ 2.1、搭建环境 搭建数据库 CREATE DATABASE `mybatis`; USE `mybatis`; CREATE TABLE `user`( `id` INT(20) NOT NULL PRIMA ...
分类：
其他好文 时间：
2021-01-18 11:37:37
阅读次数：
0
# 先定义dataframe各列的数据类型 from pyspark.sql.types import *schema = StructType([ StructField("a", NullType(), True), StructField("b", AtomicType(), True), S ...
分类：
其他好文 时间：
2021-01-18 11:29:36
阅读次数：
0
1. 设置执行引擎 set hive.execution.engine=mr;set hive.execution.engine=spark; 如果设置执行引擎为MR，那么调用Hadoop的maprecude来运行需要执行的job的程序； 如果设置执行引擎为spark，那么就会调用spark来执行任 ...
分类：
其他好文 时间：
2021-01-15 12:15:21
阅读次数：
0
解决Hadoop HA集群 NameNode 无法自动故障转移（切换active） 在学习 HA 自动化配置，按照hadoop官网:https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HDFSHighAvaila ...
分类：
其他好文 时间：
2021-01-15 12:13:12
阅读次数：
0
本机环境 IDEA 2017.3.5 MySql 5.5.40 tomcat 8.5.51 Maven 3.5.0 各配置环境 1、要求数据库连接正常，且有项目对应的数据库及表 2、Maven插件配置正常 3、tomcat服务器配置正常 基本环境搭建 1、IDEA中新建一个Maven项目 两种方式 ...
分类：
其他好文 时间：
2021-01-14 11:24:59
阅读次数：
0
Beego环境搭建和bee工具安装使用，以Windows环境为例。 首先，下载并安装好GO并配置好GOROOT和GOPATH环境变量（如果您是用msi包安装的go,那么这些环境变量已经设置好了）。并在Path环境变量中加入%GOPATH%\bin和%GOROOT%bin。 第二步，下载并安装好git ...
分类：
其他好文 时间：
2021-01-13 11:09:35
阅读次数：
0
#ElasticSearch入门 安装ElasticSearch 1.下载解压缩ElasticSearch 下载elasticsearch ElasticSearch是Java开发的，运行需要先安装JDK，官方提供 带JDK和不带JDK的安装包 2.运行ElasticSearch Windows下运 ...
分类：
其他好文 时间：
2021-01-13 11:02:35
阅读次数：
0
虚拟机克隆 a. vim /etc/udev/rules.d/70-persistent-net.rules 更改网卡名 b. vim /etc/sysconfig/network-scripts/ifcfg-eth0 更新网卡 c. vim /etc/sysconfig/network 更改主机名 ...
分类：
其他好文 时间：
2021-01-12 10:50:26
阅读次数：
0
