一、概述1.1、简介Kafka最初是由LinkedIn公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统。ApacheKafka也是一个开源消息系统，由Scala写成；Kafka是一个分布式消息队列。Kafka对消息保存是根据Topic进行归类，发送消息者称为Producer，消息接受者称为Consumer，此外kafka集群有多个kafka实例组成，每
分类：
其他好文 时间：
2020-04-17 09:28:47
阅读次数：
71
hive -e ' use bd; set hive.exec.max.dynamic.partitions.pernode=100; set hive.exec.dynamici.partition=true; set hive.exec.dynamic.partition.mode=nonstr ...
分类：
其他好文 时间：
2020-04-16 22:38:02
阅读次数：
109
小编一般是通过虚拟机安装Linux，以下是虚拟机Linux安装。 一、建议的VMware配置 1、CPU：建议主频为1GHz以上 2、内存：建议1G以上 3、硬盘：建议分区空闲空间8G以上 二、虚拟机网络设置 三、系统分区 1、磁盘分区 磁盘分区是使用分区编辑器在磁盘上划分几个逻辑部分。磁盘一旦划分 ...
分类：
系统相关 时间：
2020-04-16 19:31:36
阅读次数：
112
将存放在同一个数据库中的数据分散存放到多个数据库上，实现分布存储，通过路由规则路由访问特定的数据库这样一来每次访问面对的就不是单台服务器了，而是N台服务器，这样就可以降低单台机器的负载压力。sqlserver 2005版本之后，可以友好的支持“表分区”。 垂直(纵向)拆分：是指按功能模块拆分，比如分 ...
分类：
数据库 时间：
2020-04-16 14:56:15
阅读次数：
96
现在来解决在安装树莓派系统时遇到的28GB空闲空间不能被系统使用的问题。用PuTTY远程登录树莓派，查看磁盘状态：pi@raspberrypi:~ $ df -h系统能识别到的磁盘空间总共只有1.7G，装完系统后已经用了1.1G，还剩470M。网络上可以找到两种常用的方法来扩展分区（推荐用第1种）：... ...
分类：
其他好文 时间：
2020-04-15 18:06:48
阅读次数：
145
大数据时代到来，短视频和大量图片导致数据表非常大，频繁的查询导致传统的关系型数据库难以满足需求，因此非关系型数据库就应运而生。Redis数据库是NoSQL是一种，在分布式数据库的CAP原理中，Redis满足强一致性和高可用性，强一致性就是要保证数据的质量，高可用性即稳定性，本文简单介绍了非关系型数据 ...
分类：
数据库 时间：
2020-04-14 22:30:34
阅读次数：
156
Java是目前用户最多、使用范围最广的软件开发技术之一。Java 的技术体系主要由支撑 Java程序运行的虚拟机、提供各开发领域接口支持的Java API、Java 编程语言及许多第三方 Java框架(如Spring、Struts 等)构成。在国内，有关Java API、Java语言语法及第三方框 ...
分类：
编程语言 时间：
2020-04-14 18:45:35
阅读次数：
73
24.归档进程 (ARCn) 归档进程 (ARCn) 是后台进程，仅当数据库处于ARCHIVELOG模式并启??动归档时才存在，在这种情况下ARCn会?动归档联机重做?志?件。?志写?进程 (LGWR) 在归档之前不能重?和覆盖联机重做?志?件组。 数据库将根据需要启动多个归档程序进程，以确保已填充 ...
分类：
数据库 时间：
2020-04-14 17:00:12
阅读次数：
88
操作系统：WIN10 主要工具：DiskGenius v5.2.0.884 x64（具有：硬盘分区、数据恢复、已删除文件恢复、分区复制、分区备份、硬盘复制等功能） SD卡：闪迪32G class10 高速Micro SD卡（TF卡），一般用在行车记录仪上 完成一个树莓派装置的安装调试后，下一步需要考 ...
分类：
其他好文 时间：
2020-04-14 10:37:41
阅读次数：
99
1 4.6.1 分区表基本操作 2 1．引入分区表（需要根据日期对日志进行管理） 3 /user/hive/warehouse/log_partition/20170702/20170702.log 4 /user/hive/warehouse/log_partition/20170703/2017 ...
分类：
其他好文 时间：
2020-04-13 22:23:13
阅读次数：
56
