码迷,mamicode.com
首页 >  
搜索关键字:hadoop linux 集群 大数据    ( 194441个结果
Linux磁盘管理与文件系统
结构 磁盘基础 检测并确认新硬盘 规划硬盘中的分区 创建文件系统 挂载、卸载文件系统 磁盘结构 硬盘的物理结构 盘片:硬盘有多个盘片,每盘片2面 磁头:每面一个磁头 硬盘的数据结构 扇区:盘片被分为多个扇形区域,每个扇区存放512字节的数据,硬盘的最小存储单位 磁道:同一盘片不同半径的同心圆,是由磁 ...
分类:系统相关   时间:2021-06-18 19:32:14    阅读次数:0
Sqoop的数据导出
将数据从HDFS把文件导出到RDBMS数据库 导出前,目标表必须存在于目标数据库中。 默认操作是从将文件中的数据使用INSERT语句插入到表中 更新模式下,是生成UPDATE语句更新表数据 数据是在HDFS当中的如下目录/sqoop/emp,数据内容如下 1201,gopal,manager,500 ...
分类:其他好文   时间:2021-06-18 19:31:03    阅读次数:0
linux修改 dns配置文件/etc/resolv.conf重启之后自动还原的解决方法
Linux环境:centos6.7 修改/etc/resolv.conf重启之后自动还原,主要因为resolv.conf文件是由/etc/sysconfig/network-scripts/ifcfg-eth0生成的。 方法一:修改/etc/sysconfig/network-scripts/ifc ...
分类:系统相关   时间:2021-06-18 19:19:09    阅读次数:0
kubernetes集群系列资料01---集群规划
本资料以VMware虚拟机为节点进行创建kubernetes集群。 1.K8S集群部署节点规划 K8S-master01:K8S集群控制节点; K8S-node01、K8S-node02:运行POD的工作节点; harbor:创建本地镜像私有仓库; router:软路由koolshare,为K8S集 ...
分类:Web程序   时间:2021-06-18 19:15:03    阅读次数:0
MapReduce(八)Hadoop中的数据本地化
原文链接: https://data-flair.training/blogs/data-locality-in-hadoop-mapreduce/ 1、什么是数据本地化 数据本地化(Data locality)是指将计算移动到数据所在的节点,而不是移动数据移动到计算所在的节点。在Hadoop中,一 ...
分类:其他好文   时间:2021-06-18 19:09:26    阅读次数:0
Linux之Shell编程
3.Shell编程 1.shell是什么 shell是一个命令行解释器,它为用户提供了一个向Linux内核发送请求以便运行程序的界面系统级程序,用户可以用shell来启动、挂起、停止一些程序。 ###2. shell脚本的执行方式 ### 脚本格式要求 1.脚本以#!/bin/bash开头 2.脚本 ...
分类:系统相关   时间:2021-06-18 19:00:06    阅读次数:0
k8s
Kubenetes是一个针对容器应用,进行自动部署,弹性伸缩和管理的开源系统。主要功能是生产环境中的容器编排。 K8S是Google公司推出的,它来源于由Google公司内部使用了15年的Borg系统,集结了Borg的精华。 和大多数分布式系统一样,K8S集群至少需要一个主节点(Master)和多个 ...
分类:其他好文   时间:2021-06-18 18:59:17    阅读次数:0
linux磁盘管理与文件系统
一、硬盘结构 ●硬盘的物理结构 ①盘头:硬盘有多个盘片,每盘片两面 ②磁头:每面一个磁头 ●硬盘的数据结构 ①扇区:盘片被分为多个扇形区域,每个扇区存放512字节的数据,是硬盘的最小存储单位 ②磁道:同一盘片不同半径的同心圆,是由磁头在盘片表面划出的圆形轨迹 ③柱面:不同盘片相同半径构成的圆柱面,由 ...
分类:系统相关   时间:2021-06-18 18:58:14    阅读次数:0
kafka集群五、__consumer_offsets副本数修改
kafka几圈搭建好了,但当一个节点挂机后整个集群还是不能使用并没有起到集群的作用,这是为什么? 在新版本Kafka中,__consumer_offsets这个topic是存放消费者偏移量的,但是该主题默认配置副本数量只有1,容易造成单点故障 注:上一篇博客地址https://www.cnblogs ...
分类:其他好文   时间:2021-06-18 18:52:34    阅读次数:0
Address 2 OpenCV errors (raise.c and GTK) by reinstalling and rebuilding
error 1: Unable to open 'raise.c': Unable to read file '/build/glibc-S9d2JN/glibc-2.27/sysdeps/unix/sysv/linux/raise.c' (Error: Unable to resolve non- ...
分类:其他好文   时间:2021-06-18 18:49:18    阅读次数:0
194441条   上一页 1 ... 23 24 25 26 27 ... 19445 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!