Zookeeper 概述&命令 1)初识 Zookeeper 1.1)Zookeeper概念 ?Zookeeper 是 Apache Hadoop 项目下的一个子项目,是一个树形目录服务。 ?Zookeeper 翻译过来就是 动物园管理员,他是用来管 Hadoop(大象)、Hive(蜜蜂)、Pig( ...
分类:
其他好文 时间:
2021-01-02 11:29:32
阅读次数:
0
新建的表想修改,可以直接drop掉,重新创建。 但是已经使用的表,有数据了,也可能被引用,就不适合drop了,需要用到 alter 对表或字段做局部调整(对表的定义或者说结构进行修改)。 1.1.1 增加列 要增加一个列,可以使用这样的命令: ALTER TABLE products ADD COL ...
分类:
其他好文 时间:
2021-01-02 10:39:32
阅读次数:
0
?通知:一些录友基础比较薄弱,不知道从哪里开始刷题。可以看一下公众号左下角的「算法汇总」,「算法汇总」已经把题目顺序编排好了,文章顺序即刷题顺序,这是全网最详细的刷题顺序了,方便录友们从头打卡学习,「算法汇总」会持续更新!?763.划分字母区间题目链接:https://leetcode-cn.com/problems/partition-labels/字符串S由小写字母组成。我们要把这个字符串划分
分类:
编程语言 时间:
2021-01-02 10:32:12
阅读次数:
0
将hive/lib下面的jline-2.12.jar 复制到hadoop目录下 cp /usr/local/src/hive-1.2.2/jline-2.12.jar /usr/local/src/hadoop-2.6.1/share/hadoop/yarn/lib/ ...
分类:
其他好文 时间:
2021-01-01 12:54:42
阅读次数:
0
1.inodes介绍 Linux系统下文件数据储存在"块"中,文件的元信息,例如文件的创建者、文件的创建日期、文件的大小等。这种储存文件元信息的区域就叫做inode,中文译名为"索引节点"。inode也占用硬盘空间,硬盘格式化的时候,操作系统自动将硬盘分成两个区域。一个是数据区,存放文件数据;另一个 ...
分类:
系统相关 时间:
2020-12-31 12:45:40
阅读次数:
0
网站用户行为分析 步骤 1.1 本地数据集上传到数据仓库Hive 数据集下载与查看 数据集预处理 把数据集导入HDFS中 在Hive上创建数据库 1.2 Hive数据分析 给出数据分析需求 用select语句实现数据分析 数据分析结果查看与保存 1.3 Hive、MySQL、HBase数据互导 操作 ...
分类:
Web程序 时间:
2020-12-31 12:08:34
阅读次数:
0
原始数据如下: 转换后效果: 实现方式: -- 原数据 SELECT '[{"slot_seq":"1","status":"0","battery_sn":"K212EV14C3"},{"slot_seq":"10","status":"0","battery_sn":"K482GE13RT"}, ...
分类:
编程语言 时间:
2020-12-29 12:03:02
阅读次数:
0
Mysql Mysql下载 下载网址 https://downloads.mysql.com/archives/community/ 版本选择 Mysql安装 上传解压 使用FTP工具将window本地的文件上传到Linux系统后进行解压:```sql tar -xvf mysql-8.0.18-1 ...
分类:
数据库 时间:
2020-12-29 11:54:05
阅读次数:
0
需要准备 hadoop-2.6.0-cdh5.7.0 、jdk1.8.0_161 、zookeeper-3.4.5-cdh5.7.0、 hive-1.1.0-cdh5.7.0 1.在hadoop 的etc/hadoop/目录中的文件 core-site.xml 添加下面代码 ,其中颜色标记部分为你的 ...
分类:
其他好文 时间:
2020-12-29 11:30:43
阅读次数:
0
问题背景: (无关操作已省略) Spark ETL执行以下SQL: CREATE TEMPORARY VIEW A select user_id, ...; CREATE TEMPORARY VIEW B select user_id, ... from A ...; INSERT OVERWRIT ...
分类:
数据库 时间:
2020-12-29 11:28:30
阅读次数:
0