vim sqoop-env.sh export HADOOP_HOME=/apps/hadoop export HADOOP_MAPRED_HOME=/apps/hadoop export HIVE_HOME=/apps/hive export ZOOKEEPER_HOME=/apps/zookee ...
                            
                            
                                分类:
其他好文   时间:
2021-03-02 12:20:39   
                                阅读次数:
0
                             
                    
                        
                            
                            
                                面试题 一、Hadoop 1.Hadoop面试题总结(一) 2.Hadoop面试题总结(二)——HDFS 3.Hadoop面试题总结(三)——MapReduce 4.Hadoop面试题总结(四)——YARN 5.Hadoop面试题总结(五)——优化问题 二、Zookeeper 1.Zookeeper ...
                            
                            
                                分类:
其他好文   时间:
2021-03-02 11:41:45   
                                阅读次数:
0
                             
                    
                        
                            
                            
                                
                    1.概述 在大数据的浪潮下,时时刻刻都会产生大量的数据。比如社交媒体、博客、电子商务等等,这些数据会以不同的类型存储在不同的平台里面。为了执行ETL(提取、转换、加载)操作,需要一个消息中间件系统,该系统应该是异步和低耦合的,即来自各种存储系统(如HDFS、Cassandra、RDBMS等)的数据可 ...
                            
                            
                                分类:
其他好文   时间:
2021-03-01 13:50:00   
                                阅读次数:
0
                             
                    
                        
                            
                            
                                1. 介绍 Zookeeper 的文件系统 Zookeeper 提供一个多层级的节点命名空间(节点称为 znode)。与文件系统不同的是,这些节点都可以设置关联的数据,而文件系统中只有文件节点可以存放数据而目录节点不行。Zookeeper为了保证高吞吐和低延迟,在内存中维护了这个树状的目录结构,这种 ...
                            
                            
                                分类:
其他好文   时间:
2021-03-01 13:21:01   
                                阅读次数:
0
                             
                    
                        
                            
                            
                                四、分布式锁 传统的锁可解决在一台服务器上多个线程之间的并发冲突,但有些场景下多台服务器需要进行同一操作,这时为了协调多台服务器就需要分布式锁(由第三方提供锁)。分布式锁常用的是两种实现方式:使用Redis或Zookeeper。 4.1Redis自带的原语 Redis是一个key value数据库, ...
                            
                            
                                分类:
其他好文   时间:
2021-03-01 13:19:18   
                                阅读次数:
0
                             
                    
                        
                            
                            
                                
                    Eureka Server即服务的注册中心,在刚才的案例中,我们只有一个EurekaServer(Eureka Server是一个web应用,可以启动多个实例),事实上EurekaServer也可以是一个集群,形成高可用的Eureka中心。eureka-server模块只有一个,配置只有一个,通过在 ...
                            
                            
                                分类:
其他好文   时间:
2021-03-01 13:12:49   
                                阅读次数:
0
                             
                    
                        
                            
                            
                                
                    集群角色: leader:负责事务读写操作, follower:读操作,把写操作交给leader,投票 observer:除了不投票几乎和follower一致 ZXID: 分布式事务id,全局唯一,一般作为事务id使用 会话: 每次服务端连接建立,存在一个会话,和服务端的通讯。一般会创建一个零时节点 ...
                            
                            
                                分类:
其他好文   时间:
2021-03-01 12:59:32   
                                阅读次数:
0
                             
                    
                        
                            
                            
                                
                    In this series for SQL Server Always On Availability Groups, we are covering end to end configurations for SQL Server 2019 on Windows Server 2016. In  ...
                            
                            
                                分类:
数据库   时间:
2021-02-27 13:31:13   
                                阅读次数:
0
                             
                    
                        
                            
                            
                                
                    This article explores the configuration of Windows failover clusters, storage controllers, and quorum configurations for SQL Server Always On Availabi ...
                            
                            
                                分类:
数据库   时间:
2021-02-27 13:30:23   
                                阅读次数:
0
                             
                    
                        
                            
                            
                                
                    导言 TcaplusDB是腾讯出品的分布式NoSQL数据库,存储和调度的代码完全自研。具备缓存+落地融合架构、PB级存储、毫秒级时延、无损水平扩展和复杂数据结构等特性。同时具备丰富的生态、便捷的迁移、极低的运维成本和五个九高可用等特点。TcaplusDB产品团队目前运营着全球最大的游戏数据库集群,服 ...
                            
                            
                                分类:
数据库   时间:
2021-02-27 13:10:57   
                                阅读次数:
0