1. Hadoop 概览Google 三篇论文（GFS -> HDFS，Map-Reduce -> MR，BigTable -> HBase）是 Hadoop 的思想之源。Hadoop 生态非常庞大，其最初两大核心是 HDFS 和 MR，分别负责存储和计算（Hadoop 1.x 中，MR 既负责计算 ...
一、分区概念 Oracle允许将表、索引、索引组织表细分成更小的片，每个片我们称之为分区。分区有其自己的名字和存储参数。 每行数据只能属于一个分区，分区键决定数据行属于哪个分区。分区键由一个或多个列组成。Oracle自动的将数据的DML操作映射到相应的分区中。 二、分区的优点： a.由于将数据分散到 ...
分类：
数据库 时间：
2021-06-08 22:46:40
阅读次数：
0
Eureka Eureka是spring cloud中的一个负责服务注册与发现的组件。遵循着CAP理论中的A(可用性)P(分区容错性)。一个Eureka中分为eureka server和eureka client。其中eureka server是作为服务的注册与发现中心。eureka client既 ...
分类：
其他好文 时间：
2021-06-08 22:44:26
阅读次数：
0
运行环境 centos 5.6 hadoop hivesqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具 在使用过程中可能遇到的问题： sqoop依赖zookeeper，所以必须配置ZOOKEEPER_HOME到环境变量中。sq ...
分类：
数据库 时间：
2021-06-07 20:36:05
阅读次数：
0
Python访问PostGIS(建表、空间索引、分区表)：https://www.cnblogs.com/likehua/p/3908323.html ...
分类：
编程语言 时间：
2021-06-07 20:29:14
阅读次数：
0
1. 安装启动检查Mysql服务。##netstat -tunlp (3306) cd /usr/local/hive/lib ls mysql* cp mysql-connector-java-5.1.40-bin.jar /usr/local/spark/jars/ cd /usr/local/ ...
分类：
数据库 时间：
2021-06-07 20:10:49
阅读次数：
0
1.安装启动检查Mysql服务。netstat -tunlp (3306) 2.spark 连接mysql驱动程序。–cp /usr/local/hive/lib/mysql-connector-java-5.1.40-bin.jar /usr/local/spark/jars 3.启动 Mysql ...
分类：
数据库 时间：
2021-06-06 19:08:48
阅读次数：
0
操作系统 $ cat /proc/version CPU $ cat /proc/cpuinfo | grep "model name" 按照model name 对结果进行筛选 内存 $ cat /proc/meminfo 各分区的使用情况 $ df -h 内存区和交换区的使用情况 $ free ...
分类：
系统相关 时间：
2021-06-03 17:52:10
阅读次数：
0
1) 增加一块硬盘 1G [到设置中添加一块硬盘即可] 2) 重启一下服务器 lsblk 3) 给 sdb 硬盘分区 fdisk /dev/sdb n,p,enter,enter,w 4) 格式化 sdb1 mkfs.ext4 /dev/sdb1 [把 /dev/sdb1 分区格式化] ...
分类：
其他好文 时间：
2021-06-03 17:39:52
阅读次数：
0
一．什么是 NFSNFS 是 Network File System 的缩写，它可以通过网络，让不同的机器、不同的操作系统可以共享彼此的文件。NFS 服务器可以让 PC 将网络中的 NFS 服务器共享的目录挂载到本地端的文件系统中，而在本地端的系统中来看，那个远程主机的目录就好像是自己的一个磁盘分区 ...
分类：
系统相关 时间：
2021-06-02 19:36:24
阅读次数：
0
