码迷,mamicode.com
首页 >  
搜索关键字:hadoop linux 集群 大数据    ( 194441个结果
Linux学习
# Linux 基础指令 vi打开文件 ls列出目录内容 cd -返回之前目录(不一定是上一级目录)cd 。。才是返回上一级 mkdir创建文件夹 mkdir -p递归创建文件夹 cp复制空文件 cp-r连内部文件一起复制 -p(保留文件属性如时间。。。) mv剪切没有这样的限制 vi /etc/s ...
分类:系统相关   时间:2021-06-19 18:44:14    阅读次数:0
HDFS的读写流程
HDFS的读取过程 HDFS的读取流程大致有以下几个步骤: (1)客户端通过调用FileSystem对象的open()来打开希望读取的文件。对于HDFS平台来说,这个对象是DistributedFileSystem类的是一个实例,所以实际调用的是DistributedFileSystem对象的ope ...
分类:其他好文   时间:2021-06-19 18:42:26    阅读次数:0
MyCat配置文件详解--sequence配置
在实现分库分表的情况下,数据库自增主键已经无法保证在集群中是全局唯一的主键了,因此mycat提供了全局的sequence,并且提供了本地配置、数据库配置等多种实现方式。 1. 本地文件方式 采用该方式,mycat将sequence配置到classpath目录的sequence_conf.proper ...
分类:其他好文   时间:2021-06-19 18:40:35    阅读次数:0
聚焦 | 数据湖分析如何面向对象存储OSS进行优化?
简介: 最佳实践,以DLA为例子。DLA致力于帮助客户构建低成本、简单易用、弹性的数据平台,比传统Hadoop至少节约50%的成本。其中DLA Meta支持云上15+种数据数据源(OSS、HDFS、DB、DW)的统一视图,引入多租户、元数据发现,追求边际成本为0,免费提供使用。DLA Lakehou ...
分类:其他好文   时间:2021-06-18 20:06:29    阅读次数:0
Jenkins在K8s的pod中实现docker in docker 构建镜像并发布到K8s集群中
一、运行架构 Jenkins的kubernetes plugin在执行构建时会在kubernetes集群中自动创建一个Pod,并在Pod内部创建一个名为jnlp的容器,该容器会连接Jenkins并运行Agent程序,形成一个Jenkins的Master和Slave架构,然后Slave会执行构建脚本进 ...
分类:其他好文   时间:2021-06-18 20:01:37    阅读次数:0
性能测试流程
性能测试流程 注意要点 测试机器硬件配置尽量和线上一致 系统版本与线上一致 测试环境部署线上最小单元模块(一般线上都是集群部署,线下可以用最小的单元集群) 应用、中间件、数据库要与线上一致 其他特殊配置 数据构造 ? 业务接口 ? -- 适合数据表关系复杂 ? -- 优点: 数据完整性比较好 ? 存 ...
分类:其他好文   时间:2021-06-18 19:57:35    阅读次数:0
VirtualBox6.1启用VT-x/AMD-V
我的宿机是Mint20,所有使用linux的命令启用VT-x/AMD-V linux启用方式 在宿机上执行命令列出所有虚机 ~$ VBoxManage list vms "centos7-1" {ec49b90a-fd46-402d-bce6-d73f0b889c9b} "centos7-2" {f ...
分类:其他好文   时间:2021-06-18 19:55:56    阅读次数:0
Linux:目录和文件管理
一、Linux目录结构 1、树形目录结构 2、根目录 ■ 所有分区、目录、文件等的位置起点 ■ 整个树形目录结构中,使用独立的一个“/”表示 3、常见的子目录 /root 管理员的宿主(家)目录 /home/xxx 除root用户之外的普通用户的家目录 /bin 存放二进制文件,所有用户可执行的命令 ...
分类:系统相关   时间:2021-06-18 19:43:40    阅读次数:0
Linux系统程序的安装及管理
Linux应用程序基础 应用程序与系统命令的关系 角色 系统命令 应用程序 文件位置 一般在/bin和/sbin 目录中,或为Shell 内部指令 通常在/usr/bin ,/usr/sbin 和/usr/local/bin , /usr/local/sbin 目录中 主要用途 完成对系统的基本管理 ...
分类:系统相关   时间:2021-06-18 19:39:00    阅读次数:0
Linux下挂在IPsan
挂载IP-SAN ipsan重新分区,详见IPSAN的配置手册; 运行安装iscsi-initiator-utils-6.2.0.872-10.el6.i686.rpm 启动iscsi服务/etc/init.d/iscsi start(如果该项未能启动,直接进入下面操作) 发现网络中的存储节点,其中 ...
分类:系统相关   时间:2021-06-18 19:35:16    阅读次数:0
194441条   上一页 1 ... 22 23 24 25 26 ... 19445 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!