//命令按钮点击触发事件 private void button2_Click(object sender, EventArgs e) { if (dataGridView1.Rows.Count==0) return;//判断是否有数据,没有就返加 Microsoft.Office.Interop ...
继续上一篇hadoop的安装。一、安装zookooper1、解压zookoopertar-zxfvzookeeper-3.3.6.tar.gz2、修改配置:cpzookeeper/conf/zoo_sample.cfgzoo.cfgThenumberofmillisecondsofeachticktickTime=2000Thenumberofticksthattheinitialsynchron
分类:
其他好文 时间:
2019-12-18 11:07:30
阅读次数:
180
目标:搭建hadoop+hbase+zoopkeer+hive开发环境安装环境:1、centeros192.168.1.1012、centeros192.168.1.102开发环境:window+eclipse一、安装hadoop集群1、配置hosts#vi/etc/hosts192.168.1.101master192.168.1.101slave12、关闭防火墙:systemctlstatus
分类:
其他好文 时间:
2019-12-18 10:52:49
阅读次数:
80
二、视图 1、Hive 的视图和关系型数据库的视图区别 和关系型数据库一样,Hive 也提供了视图的功能,不过请注意,Hive 的视图和关系型数据库的数据还是有很大的区别: (1)只有逻辑视图,没有物化视图; (2)视图只能查询,不能 Load/Insert/Update/Delete 数据; (3 ...
分类:
其他好文 时间:
2019-12-17 17:54:16
阅读次数:
111
sqoop import -D sqoop.hbase.add.row.key=true //是否将rowkey相关字段列入列族中,默认为false ;该参数必须在import之后 --connect jdbc:mysql://120.27.208.185/bigdatatest //连接mysql ...
分类:
数据库 时间:
2019-12-17 15:29:30
阅读次数:
118
Hbase启动出问题 2019-12-15 09:59:57,183 WARN [hadoop:16000.activeMasterManager] hdfs.DFSClient: DFS Read org.apache.hadoop.hdfs.BlockMissingException: Coul ...
分类:
其他好文 时间:
2019-12-15 23:53:26
阅读次数:
859
一.初始化环境 1.安装zookeeper环境并启动 2.安装hadoop环境并启动 3.准备三台服务器搭建Hbase集群 二.下载安装包 下载地址: http://archive.apache.org/dist/hbase/2.0.0/hbase-2.0.0-bin.tar.gz 三.搭建集群环境 ...
分类:
其他好文 时间:
2019-12-15 20:26:23
阅读次数:
96
Sqoop (sqoop.apache.org)工具是hadoop环境下连接关系数据库,和hadoop存储系统的桥梁,支持多种关系数据源和hive,hdfs,hbase的相互导入。一般情况下,关系数据表存在于线上环境的备份环境,需要每天进行数据导入,根据每天的数据量而言,sqoop可以全表导入,对于 ...
分类:
其他好文 时间:
2019-12-15 16:13:22
阅读次数:
82
关系型数据库与非关系型数据库关系型数据库:一个机构化的数据库,创建在关系模型基础上,一般面向于记录包括oracle,mysql,sqlserver,db2非关系型数据库:除了主流的关系型数据库意外的数据库,都人为是非关系型的包括redis,mongdb,hbase,couhdb非关系型数据库产生背景对数据库高并发读写需求对海量数据高效存储与访问需求对数据库高可扩展性与高可用需求Redis简介Red
分类:
数据库 时间:
2019-12-15 16:08:28
阅读次数:
101