大数据技术板块划分 数据采集 flume kafka logstash filebeat ... 数据存储 mysql redis hbase hdfs ... 虽然mysql不属于大数据范畴 但是我在这也列出来了,因为你在工作中离不开它 数据查询 hive impala elasticsearch ...
分类:
其他好文 时间:
2021-03-17 14:04:41
阅读次数:
0
1、为什么要引入Yarn和Spark。 (1)现有的hadoop生态系统中存在的问题 1)使用mapreduce进行批量离线分析; 2)使用hive进行历史数据的分析; 3)使用hbase进行实时数据的查询; 4)使用storm进行实时的流处理; (2)选用spark的原因 1) 应用于流式计算的S ...
分类:
其他好文 时间:
2021-03-16 13:32:12
阅读次数:
0
增添数据到数据库 package com.jdbc; import java.sql.Connection; import java.sql.DriverManager; import java.sql.PreparedStatement; import java.sql.ResultSet; im ...
分类:
编程语言 时间:
2021-03-16 11:40:11
阅读次数:
0
说明 相关环境: SpringBoot - 2.4.3 Elasticsearch - 7.11.2 这个例子默认已搭建好``springboot、jdbc、mybatis和Swagger(非必需)`等 添加依赖 <!--Elasticsearch相关依赖--> <dependency> <grou ...
分类:
编程语言 时间:
2021-03-15 10:40:34
阅读次数:
0
设置metastore 机器: ke01、ke02、ke03、ke04 ke03 为元数据库 ke01、ke02、ke04 连接到元数据库 、 hive-metastore搭建 ke03: <configuration> <property> <name>hive.metastore.warehou ...
分类:
数据库 时间:
2021-03-12 13:42:56
阅读次数:
0
1.union 和 union all 前者可以去重 select sex,address from test where dt='20210218' union all select sex,address from test where dt='20210218'; + + +--+ | sex ...
分类:
其他好文 时间:
2021-03-08 14:17:52
阅读次数:
0
Mybatis 1、简介 1.1、Mybaits简介 MyBatis 是一款优秀的持久层框架,它支持自定义 SQL、存储过程以及高级映射。MyBatis 免除了几乎所有的 JDBC 代码以及设置参数和获取结果集的工作。MyBatis 可以通过简单的 XML 或注解来配置和映射原始类型、接口和 Jav ...
分类:
其他好文 时间:
2021-03-08 13:18:58
阅读次数:
0
SpringBoot整合Redis SpringBoot 操作数据 :spring-data jpa jdbc mongodb redis! SpringData 也是和SpringBoot 齐名的一个项目 说明:在 SpringBoot2.X之后,之前使用的jedis被替换为了lettuce je ...
分类:
编程语言 时间:
2021-03-06 14:53:16
阅读次数:
0
JDBC 数据库驱动 我们的程序通过 数据库驱动 ,和数据库打交道 JDBC SUN公司为了简化开发人员的(对数据库的统一)操作,提供了一个(JAVA操作数据库的)规范,俗称JDBC,这些规范的实现具体由具体的厂商去做~~ 对于开发人员来说,我们只需要掌握JDBC接口的操作即可。 java.sql ...
分类:
数据库 时间:
2021-03-06 14:45:26
阅读次数:
0
1、引用pom文件 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-jdbc</artifactId> </dependency> <dependency> <group ...
分类:
编程语言 时间:
2021-03-06 14:34:47
阅读次数:
0