一、基础环境 1.虚拟机 VMware 15.0 2.CentOS 6.5 Linux 系统 二、MapReduce的原理分析 三、Yarn集群搭建 1.准备好三台虚拟机(这里我直接拷贝了Ha集群中一个作为主机,其余克隆) 2.修改基础配置: 1.删除每一台机器的Mac地址(CentOS 7 以上不 ...
分类:
其他好文 时间:
2019-12-30 23:15:14
阅读次数:
116
一、安装 Seafile官网下载页面:https://www.seafile.com/download/ ,获取7.0.5版本的下载地址 登录pi的命令,转到root,然后下载 #sudo -s #cd /nas root@midou:/nas# wget https://github.com/ha ...
分类:
其他好文 时间:
2019-12-29 14:43:59
阅读次数:
131
一,前言 与redis的联系 redis 单实例,数据在内存-读取快 鉴于雪崩击穿等问题 ->复制到集群 HA sentinel 哨兵实现高可用 不是绝对的实时同步,可能连最终一致性都算不上 集群模式 分片 完成分布式 协调分布式锁 二,zookeeper(不要把zk当做数据库用) 主从集群 主是单 ...
分类:
其他好文 时间:
2019-12-28 20:51:14
阅读次数:
96
hadoop存在的两个问题: 1.内存受限的问题 联邦解决内存受限问题。 建立多个NameNode,每个NameNode记录元数据的一部分,但是对于元数据整体来说本质上还是只有一份。 2.单点故障 HA(high available)高可用,解决hdfs的单点故障问题。 主备namenode,存储相 ...
分类:
其他好文 时间:
2019-12-26 21:28:33
阅读次数:
115
IDEA中的scala项目访问HDFS,程序运行,可能出现的异常: 权限问题:Permission denied: user=СÎ÷?Îè, access=WRITE, inode="/":hadoop:supergroup:drwxr-xr-x 修改运行时参数,因为HDFS上的文件所属的用户是ha ...
分类:
数据库 时间:
2019-12-26 19:33:00
阅读次数:
103
原文连接:https://blog.csdn.net/XCCCCZ/article/details/92160058 需要把home/<user>下的.Xauthority 和 .ICEauthority的owner, group都改成普通用户才行。 sudo chown username<如何ha ...
分类:
系统相关 时间:
2019-12-25 15:49:43
阅读次数:
118
主电信、备联通;测试方法:修改诚盈的IPSec,将阶段一电信的对端地址改为错误的。 方法一: 通过静态路由的管理距离:电信设置为10;联通为15。经测试,可以实现自动切换,且电信恢复后 可以切换回电信主用。 方法二: 路由一致的情况下,通过在电信链路建立link-monitor的方式。(注:在方法一 ...
分类:
其他好文 时间:
2019-12-25 15:44:26
阅读次数:
92
占位含义 | 占位符名称 | 含义 | | | | | [ext] | 资源后缀名 | | [name] | 文件名称 | | [path] | 文件的相对路径 | | [folder] | 文件所在的文件夹 | | [hash] | 和整个项?目的构建相关,只要项?文件有修改,整个项目构建的 ha ...
分类:
Web程序 时间:
2019-12-25 13:18:01
阅读次数:
92
IPv6 Spec RFC 2460: Internet Protocol, Version 6 (IPv6) Specification RFC 5095: Deprecation of Type 0 Routing Headers in IPv6 RFC 5722(更新RFC 2460): Ha ...
分类:
其他好文 时间:
2019-12-25 12:59:34
阅读次数:
245
Alibaba Java Coding Guidelines(阿里巴巴代码规约) Background Image Plus(背景图设置,Idea其实可以设置背景图,这个增加了自动切换功能) CodeGlance(代码区右侧显示代码缩略图,很直观) Free Mybatis plugin(快速从代码 ...
分类:
其他好文 时间:
2019-12-23 13:16:55
阅读次数:
80