实战案例—使用PXE工具批量部署服务器 【案例分析】 （1）规划节点 IP地址 主机名 节点 备注 192.168.200.10 localhost PXE 版本为centos6 64位 192.168.200.20 controller controller 版本为centos7 64位 （2）在 ...
分类：
其他好文 时间：
2021-02-26 13:09:15
阅读次数：
0
pyspark有个bug, 虽然下面代码写了 write.mode("overwrite")但是不生效 spark.conf.set("hive.exec.dynamic.partition.mode", "constrict") db_df.repartition(1).write.mode("o ...
分类：
其他好文 时间：
2021-02-23 14:14:20
阅读次数：
0
关防火墙（master 和 work 执行） systemctl stop firewalld systemctl disable firewalld 关SeLinux（master 和 work 执行） # 查看状态 [root@192 ~]# getenforce Enforcing # 临时关 ...
分类：
其他好文 时间：
2021-02-22 12:44:14
阅读次数：
0
在hive客户端建一张表比如bb 条件bb与abc表结构相同，abc有数据，把abc的数据导到bb里 hive -e是为了解决每次进入客户端的麻烦操作，使用了hive -e命令，可以在hive客户端外对客户端进行操作， 例如 hive -e "use aaa;select * from abc li ...
分类：
其他好文 时间：
2021-02-22 12:21:51
阅读次数：
0
一、简单用法 挂载 $ mount /dev/hda2 /home 第一个叁数是与包括文件系统的磁盘或分区相关的设备文件。 第二个叁数是要mount到的目录。 卸载挂载点 $ umount /dev/hda2 $ umount /usr 参数可以是设备文件或安装点。 二、mount详细介绍 如果想在 ...
分类：
系统相关 时间：
2021-02-22 11:53:11
阅读次数：
0
hive的数据类型分为基本数据类型，数字类型，字符串类型 基本数据类型包括 TINYINT, SMALLINT, INT/INTEGER, BIGINT, FLOAT, DOUBLE, DECIMAL, BOOLEAN, BINARY hive的数字类型 分为整数类型，浮点数类型 hive的字符串类 ...
分类：
其他好文 时间：
2021-02-22 11:50:45
阅读次数：
0
前言 昨天还是周末，公司群里就有人@，说集群有问题了，敲完Hive一直卡在那里进不去，于是我很快登上WebUi，看到了这么一幕：这台节点的磁盘满了，其他的数据分布都比较平均 为什么会这样 这里就不得不说一下HDFS复本存放策略了： namenode如何选择在哪个datanode存储复本（replic ...
分类：
其他好文 时间：
2021-02-20 12:16:37
阅读次数：
0
MySQL概述 SQL、DB、DBMS分别是什么？他们之间的关系 DB：DataBase（数据库，数据库实际上在硬盘上以文件的形式存在） DBMS：DataBase Management System（数据库管理系统，常见的有：MySQL，Oracle，DB2，Sybase，SqlServer... ...
分类：
数据库 时间：
2021-02-20 11:43:40
阅读次数：
0
既然你都来了，就来听我讲三个故事。 1. 啊啊啊今天win7虚拟机不小心把某dll搞坏了，开不了机了。从光盘里找了个原版的，复制到我主机的桌面上。 用vmware挂载之后，准备删除损坏的dll，结果提示我z:不可用，其实明明可以访问的啊啊真够傻逼的！！！ 用diskgenius挂载虚拟磁盘，删除损坏 ...
##Hbase和Hive Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。HBase是Hadoop的数据库，一个分布式、可扩展、大数据的存储。单个的从字面意思上或许很难看出二者的 ...
分类：
其他好文 时间：
2021-02-19 12:52:56
阅读次数：
0
