CentOS7下配置GlusterFS供Kubernetes使用[TOC]1.环境说明系统:CentOS7,/data为非系统分区挂载目录docker:1.13.1kubernetes:1.11.1glusterfs:4.1.22.GlusterFS部署2个节点,192.168.105.97、192.168.105.98使用yum安装yuminstallcentos-release-gluster
分类:
Web程序 时间:
2018-08-17 16:27:18
阅读次数:
227
Kubernetes使用NFS作为共享存储kubernetes管理的容器是封装的,有时候我们需要将容器运行的日志,放到本地来或是共享存储来,以防止容器宕掉,日志还在还可以分析问题。kubernetes的共享存储方案目前比较流行的一般是三个,分别是:nfs,Glusterfs和ceph。前面写过一篇kubernetes使用GlusterFS的文章,如果有兴趣也可以去实践下:http://blog.5
分类:
Web程序 时间:
2018-08-15 12:02:04
阅读次数:
327
1、思维模式转变的催化剂是大量新技术的诞生,它们能够处理大数据分析所带来的3个V的挑战。扎根于开源社区,Hadoop已经是目前大数据平台中应用率最高的技术,特别是针对诸如文本、社交媒体订阅以及视频等非结构化数据。 2、除分布式文件系统之外,伴随Hadoop一同出现的还有进行大数据集处理MapRedu ...
分类:
其他好文 时间:
2018-08-12 14:16:13
阅读次数:
126
kubernetes集群上node节点安装glusterfs的服务端集群(DaemonSet方式),并将heketi以deployment的方式部署到kubernetes集群,主要是实现 storageclass Heketi是一个具有resetful接口的glusterfs管理程序, Heketi ...
分类:
其他好文 时间:
2018-08-10 19:52:24
阅读次数:
791
proxmox是一款开源的虚拟化管理平台,在服务器虚拟化方面有不俗的表现。曾经有个单cpu4线程、16G内存、300G内存开20多个centos,并且上面的应用都是tomcat的交易系统,稳定运行大半年的记录(公司倒闭,服务器被下架)。后来,陆续迁移一些陈旧物理服务器上的应用到proxmox虚拟化平台,也是受益多多。从proxmox5.版本开始,整合了分布式文件系统ceph,并对其进行了改进。官方
分类:
其他好文 时间:
2018-08-10 13:13:25
阅读次数:
604
HDFS知识点总结 学习完Hadoop权威指南有一段时间了,现在再回顾和总结一下HDFS的知识点。 1、HDFS的设计 HDFS是什么:HDFS即Hadoop分布式文件系统(Hadoop Distributed Filesystem),以流式数据访问模式来存储超大文件,运行于商用硬件集群上,是管理网 ...
分类:
其他好文 时间:
2018-08-10 10:55:48
阅读次数:
154
查看node的标签kubectl get node --show-labels删除标签kubectl label nodes node5 storagenode-设置标签kubectl label nodes node5 storagenode=glusterfs修改标签,需要加上--overwri ...
分类:
Web程序 时间:
2018-08-08 11:09:04
阅读次数:
1325
一、环境说明 一、环境说明 二、GlusterFS安装 二、GlusterFS安装 (1)修改主机名 (2)添加host解析,实现集群主机之间相互解析 (3)关闭SElinux和防火墙 (4)安装epel源 (5)安装glusterfs源 (6)安装glusterfs 三、GlusterFS配置 三 ...
分类:
其他好文 时间:
2018-08-07 18:53:33
阅读次数:
151
在大数据的发展过程中,出现了一批专门应用与大数据的处理分析工具,如Hadoop,Hbase,Hive,Spark等,我们先从最基础的Hadoop开始进行介绍 Hadoop是apache基金会下所开发的分布式基础架构,实现了一个分布式文件系统(HDFS),HDFS拥有高容错性、高可靠性、高扩展性、高效 ...
分类:
其他好文 时间:
2018-08-07 13:02:02
阅读次数:
117
一、MFS概述(1)分布式原理分布式文件系统(isributedFileSystem)是指文件系统管理的物理存储资源不一定直接连接在本地节点上,而是通过计算机网络与节点相连。简单来说,就是把一些分散的(分布在局域网内各个计算机上)共享文件夹,集合到一个文件夹内(虚拟共享文件夹)。对于用户来说,要访问这些共享文件夹时,只要打开这个虚拟共享文件夹,就可以看到所有链接到虚拟共享文件夹内的共享文件夹,用户
分类:
其他好文 时间:
2018-08-06 10:25:07
阅读次数:
199