配置集群 配置yarn-env.sh Linux系统中获取JDK的安装路径 [xiaoran@hadoop101 hadoop-2.7.2]$ echo $JAVA_HOME /opt/module/jdk1.8.0_144 修改JAVA_HOME路径 [xiaoran@hadoop101 hado ...
分类：
其他好文 时间：
2020-10-27 11:36:17
阅读次数：
28
Hadoop基础之环境搭建 环境搭建 本地环境 可以用于开发的单节点模式，没有分布式的概念 伪分布式环境 一个节点表示一整个集群，但是分布式的概念，一个节点充当分布式里的所有角色 完全分布式 一个集群中有N个节点，他们分别充当分布式中不同的角色，完成不同的任务 伪分布式环境搭建 下载安装包 Hado ...
分类：
其他好文 时间：
2020-10-26 11:17:07
阅读次数：
16
概述本文介绍如何利用腾讯云容器服务TKE的日志功能对日志进行采集、存储与查询，分析各种功能用法与场景，给出一些最佳实践建议。注:本文仅适用于TKE集群。如何快速上手?TKE的日志功能入口在集群运维-日志规则，更多关于如何为TKE集群启用日志采集与基础用法，参考官方文档日志采集。技术架构是怎样的?TKE集群开启日志采集后，tke-log-agent作为DaemonSet部署在每个节点上，负责根据采集
分类：
其他好文 时间：
2020-10-24 11:45:15
阅读次数：
27
一、Rook、ceph简介Ceph分布式存储系统Ceph是一种高度可扩展的分布式存储解决方案，提供对象、文件和块存储。在每个存储节点上，您将找到Ceph存储对象的文件系统和CephOSD（对象存储守护程序）进程。在Ceph集群上，您还可以找到CephMON（监控）守护程序，它们确保Ceph集群保持高可用性。RookRook是一个开源的cloud-nativestorage编排,提供平台和框架；为各
分类：
其他好文 时间：
2020-10-24 11:43:42
阅读次数：
23
简介Linux持续不断进军可扩展计算空间，特别是可扩展存储空间，Ceph最近加入到Linux中令人印象深刻的文件系统备选行列，它是一个分布式文件系统，能够在维护POSIX兼容性的同时加入了复制和容错功能Ceph生态系统架构可以划分为四部分：1、Clients：客户端（数据用户）2、cmds：Metadataservercluster，元数据服务器（缓存和同步分布式元数据）3、cosd：Object
分类：
其他好文 时间：
2020-10-22 23:13:23
阅读次数：
52
在kubernetes集群中，每个Node节点都会启动kubelet进程，用来处理Master节点下发到本节点的任务，管理Pod和其中的容器。kubelet会在API Server上注册节点信息，定期向Master汇报节点资源使用情况，并通过cAdvisor监控容器和节点资源。可以把kubelet理 ...
分类：
其他好文 时间：
2020-10-22 23:06:45
阅读次数：
49
Redis是一个高性能的key-value存储系统，被广泛用于微服务架构中。如果我们想要使用Redis集群模式提供的高级特性，则需要对客户端代码进行改动，这带来了应用升级和维护的一些困难。利用Istio和Envoy，我们可以在不修改客户端代码的前提下实现客户端无感知的RedisCluster数据分片，并提供读写分离、流量镜像等高级流量管理功能。RedisClusterRedis的一个常见用途是用作
分类：
其他好文 时间：
2020-10-22 22:59:55
阅读次数：
22
Redis 是一个高性能的 key-value 存储系统，被广泛用于微服务架构中。如果我们想要使用 Redis 集群模式提供的高级特性，则需要对客户端代码进行改动，这带来了应用升级和维护的一些困难。利用 Istio 和 Envoy ，我们可以在不修改客户端代码的前提下实现客户端无感知的 Redis ...
分类：
其他好文 时间：
2020-10-22 22:37:49
阅读次数：
19
使用kubeadm安装kubernetes集群非常方便，但是也有一个比较烦人的问题就是默认的证书有效期只有一年时间，所以需要考虑证书升级的问题，本文的演示集群版本为v1.17.0版本，不保证下面的操作对其他版本也适用，在操作之前一定要先对证书目录进行备份，防止操作错误进行回滚。本文主要介绍两种方式来更新集群证书。##手动更新证书该命令显示/etc/kubernetes/pki文件夹中的客户端证书以
分类：
Web程序 时间：
2020-10-21 21:29:31
阅读次数：
41
前期准备：1、一套k8s集群2、镜像准备3、harbor仓库4、镜像制作文件5、字签证书镜像下载dockerpullelasticsearch:7.6.2dockerpullfilebeat:7.6.2dockerpullkibana:7.6.2因为这边需要用到elasticserach的安全验证功能模块，所以需要对elasticserach和kibana镜像有所修改编辑elasticsearch
分类：
其他好文 时间：
2020-10-21 20:51:22
阅读次数：
19
