1. 阐述Hadoop生态系统中，HDFS, MapReduce, Yarn, Hbase及Spark的相互关系，为什么要引入Yarn和Spark。 HDFS是Hadoop体系中数据存储管理的基础，它是一个高度容错的系统，能检测和应对硬件故障，在低成本的通用硬件上运行。 HBase构建在HDFS之上 ...
分类：
其他好文 时间：
2021-06-07 20:05:58
阅读次数：
0
2. zookeeper安装 2.1 镜像地址 镜像库地址：http://archive.apache.org/dist/zookeeper/ 我们可以看到，zk的版本是比较多的，我们在使用的时候，应该尽量避免最新的版本 因为新版本中或许会存在某些bug 新版本中的错误，你可能百度也搜不到 所以我们 ...
分类：
其他好文 时间：
2021-06-07 20:00:47
阅读次数：
0
1.安装启动检查Mysql服务。netstat -tunlp (3306) 2.spark 连接mysql驱动程序。–cp /usr/local/hive/lib/mysql-connector-java-5.1.40-bin.jar /usr/local/spark/jars 3.启动 Mysql ...
分类：
数据库 时间：
2021-06-06 19:08:48
阅读次数：
0
查看所有的表 ：list 查看表中所有数据：scan 'staff' 前10条: scan 'test-table',{'LIMIT' => 10} 后10条: scan 'test-table',{'LIMIT' => 10, REVERSED => TRUE} 查看表结构：desc 'staff ...
分类：
其他好文 时间：
2021-06-05 17:36:21
阅读次数：
0
我们在开发时，需要知道Zookeeper注册中心都注册了哪些服务，有哪些消费者来消费这些服务。 我们可以通过部署一个管理中心来实现。其实管理中心就是一个web应用，部署到tomcat即可。 安装步骤： （1）将资料中的dubbo-admin-2.6.0.war文件复制到tomcat的webapps目 ...
分类：
其他好文 时间：
2021-06-02 20:49:21
阅读次数：
0
spark连接mysql数据库 安装启动检查Mysql服务。netstat -tunlp (3306) spark 连接mysql驱动程序。 cd /usr/local/hive/lib ls mysql* cp mysql-connector-java-5.1.40-bin.jar /usr/lo ...
分类：
数据库 时间：
2021-06-02 19:08:19
阅读次数：
0
1. 安装启动检查Mysql服务。##netstat -tunlp (3306) cd /usr/local/hive/lib ls mysql* cp mysql-connector-java-5.1.40-bin.jar /usr/local/spark/jars/ cd /usr/local/ ...
分类：
数据库 时间：
2021-06-02 19:00:44
阅读次数：
0
09 spark连接mysql数据库 spark连接mysql数据库 1、安装启动检查Mysql服务。 netstat -tunlp (3306) 2、spark 连接mysql驱动程序。 –cp /usr/local/hive/lib/mysql-connector-java-5.1.40-bin ...
分类：
数据库 时间：
2021-06-02 18:54:48
阅读次数：
0
安装启动检查Mysql服务。netstat -tunlp (3306) spark 连接mysql驱动程序。–cp /usr/local/hive/lib/mysql-connector-java-5.1.40-bin.jar /usr/local/spark/jars 启动 Mysql shell ...
分类：
数据库 时间：
2021-06-02 18:50:45
阅读次数：
0
概述 Zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目 动物园管理员 工作机制 Zoekeeper从设计模式角度来理解:是一-个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据,然后接受观察者的注册,一旦这些数据的状态发生变化Zookeepe ...
分类：
其他好文 时间：
2021-06-02 18:07:32
阅读次数：
0
