大数据学习路线分享Hadoop阶段的高可用配置,什么是Hadoop的HA机制 Ha机制即Hadoop的高可用(7*24小时不中断服务) 正式引入HA机制是从hadoop2.0开始,之前的版本中没有HA机制 hadoop-ha严格来说应该分成各个组件的HA机制——HDFS的HA、YARN的HAHDFS的HA机制详解HDFS的HA主要是通过双namenode协调工作实现双namenode协调
分类:
其他好文 时间:
2019-08-28 23:57:40
阅读次数:
186
三、 Spark集群安装 3.1 下载spark安装包 下载地址spark官网:http://spark.apache.org/downloads.html 这里我们使用 spark-2.1.3-bin-hadoop2.7版本. 3.2 规划安装目录 /export/servers 3.3 解压安装 ...
分类:
其他好文 时间:
2019-08-26 20:47:28
阅读次数:
106
前言:Hashtable线程安全的集合类,虽然它线程安全,然而在日常开发中使用的频率很低,毕竟锁的颗粒度太大了。但是这并不妨碍我们对其内部原理进行了解。 注:jdk版本为1.8.0_172。 1.Hashtable基本概念 Hashtable与HashMap一样,都是以键值对的形式存储数据。但是Ha ...
分类:
其他好文 时间:
2019-08-20 22:18:59
阅读次数:
78
@ResponseBody的作用就是将返回的对象通过MessageConverter处理之后,写入response的outputStream中返回。大致流程如下 1.在DispatcherServlet中调用doDispatch方法,该方法中有如下代码。这里的ha为RequestMappingHan ...
分类:
其他好文 时间:
2019-08-20 12:22:13
阅读次数:
72
为什么要有Hadoop? 从计算机诞生到现今,积累了海量的数据,这些海量的数据有结构化、半结构化、非 结构的数据,并且这些海量的数据存储和检索就成为了一大问题。 我们都知道大数据技术难题在于一个数据复杂性、数据量、大规模的数据计算。 Hadoop就是为了解决这些问题而出现的。 Hadoop的诞生 D ...
分类:
其他好文 时间:
2019-08-20 01:15:59
阅读次数:
113
一、常用的定时功能 (1)基本、通用、高级定时器都有最基本的定时功能,定时功能用到的函数如下: HAL_TIM_Base_Init 初始化定时,包括分频、 预装值等。 HAL_TIM_ConfigClockSource 选择定时器的时钟源 HAL_TIM_Base_Start_IT 开始定时器 HA ...
分类:
其他好文 时间:
2019-08-14 23:54:16
阅读次数:
298
DRBD:DistributedReplicatedBlockDevice分布式复制块设备heartbeat-ldirectord作用生成规则健康状态检查corosync+ldirectordkeepalived+ipvsserver:rsync+inotifyClient:rsync,sersyncSAN:把SAN网络模拟成SCSI总线,HOSTinitiatorSANservertarget(
分类:
系统相关 时间:
2019-08-14 18:54:32
阅读次数:
124
Docker报错 WARNING: IPv4 forwarding is disabled. Networking will not work. Docker报错 WARNING: IPv4 forwarding is disabled. Networking will not work. 通过ha ...
分类:
Web程序 时间:
2019-08-13 17:04:47
阅读次数:
175
1、简介: 1、是什么: Redis-Sentinel是Redis官方推荐的高可用(HA)方案,当用Reids 做master-slave高可用方案时,假如master宕机了,redis本身(包括它的很多客服端)都没有实现自动的主备切换,而Redis-Sentinel本身也是一个独立运行的进程,它能 ...
分类:
其他好文 时间:
2019-08-08 19:27:31
阅读次数:
114
今天在学习Eureka的时候发现注册Client端总是注册不到注册中心,并且也启动不起来,总是出现registrationstatus:204这个错误。异常信息:"E:\ProgramFiles\Java\jdk1.8.0_171\bin\java"-agentlib:jdwp=transport=dt_socket,address=127.0.0.1:55838,suspend=y,server
分类:
其他好文 时间:
2019-08-06 18:21:15
阅读次数:
4151