码迷,mamicode.com
首页 >  
搜索关键字:角色 hadoop    ( 24876个结果
cobbler
cobbler介绍 cobbler服务端部署 环境描述 关闭防火墙/SElinux 主机 ip地址 服务 角色 vm2(centos7) 192.168.225.128 cobbler,httpd,tftp 服务端 下载软件 配置yum源 [root@vm2 yum.repos.d]# curl - ...
分类:其他好文   时间:2020-12-01 11:57:15    阅读次数:4
Cloudera Manager的基本使用
>.ClouderaManager功能 1.1>.管理监控集群主机(主要监控硬件和软件的信息); 1.2>.同一管理配置(主要是针对服务,比如hdfs,hbase等等); 1.3>.管理维护Hadoop平台系统; 2>.ClouderaManager的一些常见名词 2.1>.主机-host 2.2> ...
分类:其他好文   时间:2020-12-01 11:54:36    阅读次数:3
Hadoop框架:MapReduce基本原理和入门案例
MapReduce既是一个编程模型,也是一个计算组件,处理的过程分为两个阶段,Map阶段:负责把任务分解为多个小任务,Reduce负责把多个小任务的处理结果进行汇总。其中Map阶段主要输入是一对Key-Value,经过map计算后输出一对Key-Value值;然后将相同Key合并,形成Key-Value集合;再将这个Key-Value集合转入Reduce阶段,经过计算输出最终Key-Value结果集。
分类:其他好文   时间:2020-11-26 14:53:23    阅读次数:6
计数器
package com.atguigu.etl; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.NullWritable; impo ...
分类:其他好文   时间:2020-11-25 13:04:03    阅读次数:26
kubeadm高可用master节点(三主两从)
1、安装要求在开始之前,部署Kubernetes集群机器需要满足以下几个条件:五台机器,操作系统CentOS7.5+(mini)硬件配置:2GBRAM,2vCPU+,硬盘30GB+集群中所有机器之间网络互通,且可访问外网。2、安装步骤角色IPk8s-lb192.168.50.100master1192.168.50.128master2192.168.50.129master3192.168.50
分类:其他好文   时间:2020-11-25 12:13:24    阅读次数:5
大数据组件
1.大数据架构图谱 文件系统 HDFS Hadoop Distributed File System,简称HDFS,是一个分布式文件系统。HDFS是一个高度容错性的系统,适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问,非常适合大规模数据集上的应用。 GlusterFS 是一个集群的文件系统 ...
分类:其他好文   时间:2020-11-25 12:06:50    阅读次数:8
Hadoop全分布模式启动集群
一、 初始化工作: 1. 准备三台机器 hostanme IP 用途 master 192.168.0.10 namenode node1 192.168.0.11 datenode node2 192.168.0.12 datenode 在三台机器上做下面的动作 2. 编辑/etc/hosts 1 ...
分类:其他好文   时间:2020-11-23 12:38:36    阅读次数:12
我要进大厂之大数据Hadoop HDFS知识点(1)
01 我们一起学大数据 老刘今天开始了大数据Hadoop知识点的复习,Hadoop包含三个模块,这次先分享出Hadoop中的HDFS模块的基础知识点,也算是对今天复习的内容进行一次总结,希望能够给想学大数据的同学一点帮助,也希望能够得到大佬们的批评和指点!(每个点都很重要,都不能忽视) 02 需谨记 ...
分类:其他好文   时间:2020-11-23 12:18:23    阅读次数:6
There was an unexpected error (type=Forbidden, status=403). Forbidden
这个错误是缺少权限的意思 访问这个路径需要指定的角色,代码中是这样的: 主要这里配置的是访问任意路径都需要USER角色 然后数据库角色表中必须是这样的: 带有ROLE_前缀!!! ROLE_USER!!!!!!!! 参考: https://blog.csdn.net/qq_27093097/arti ...
分类:其他好文   时间:2020-11-23 12:07:52    阅读次数:7
docker
@ 1.Docker概述 1.1Docker为什么会出现 一款产品:开发--》上线,需要两套环境!应用环境,应用配置! 开发 运营之间产生问题:我在我的电脑上可以运行!版本更新导致服务不可用!对于运维就很难 开发即运维! 环境配置十分麻烦,每一个机器都要部署环境(集群Redis、ES、Hadoop。 ...
分类:其他好文   时间:2020-11-21 12:47:24    阅读次数:31
24876条   上一页 1 ... 25 26 27 28 29 ... 2488 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!