本地文件系统创建一个文件,输入带姓名学号信息。 查看新建文件所在目录 查看新建文件内容 将此文件上传到HDFS文件系统上的用户目录 HDFS上查看相应目录 HDFS上查看文件内容 HDFS上查看文件大小 删除本地1步骤创建的文件 将HDFS上的文件下载到本地 查看本地文件目录 ...
分类:
其他好文 时间:
2020-10-24 10:30:16
阅读次数:
25
1.本地文件系统创建一个文件,输入带姓名学号信息。 2.查看新建文件所在目录 3.查看新建文件内容 4.将此文件上传到HDFS文件系统上 5.HDFS上查看相应目录 6.HDFS上查看文件内容 7.HDFS上查看文件大小 8.删除本地1步骤创建的文件 9.将HDFS上的文件下载到本地 10.查看本地 ...
分类:
其他好文 时间:
2020-10-24 10:26:17
阅读次数:
24
1.本地文件系统创建一个文件,输入带姓名学号信息 2.查看新建文件所在目录 3.查看新建文件内容 4.将此文件上传到HDFS文件系统上 5.HDFS上查看相应目录 6.HDFS上查看文件内容 7.删除本地1步骤创建的文件 8.将HDFS上的文件下载到本地 9.查看本地文件目录 ...
分类:
其他好文 时间:
2020-10-24 09:48:10
阅读次数:
17
开源日志收集Exceptionless简单使用 weixin_30463341 2018-06-07 18:30:00 124 收藏 文章标签: python 大数据 java 版权 这两天在研究一个开源的日志收集工具Exceptionless 官网地址:https://exceptionless. ...
1.用自己的图,描述HDFS体系结构、工作原理与流程。 2.伪分布式安装Hadoop (1)创建hadoop用户 (2)更新apt (3)安装SSH ,配置无密码SSH登录 (4)安装JAVA环境 (5)安装 Hadoop 2.7.1 (6)Hadoop伪分布式配置 (7)运行Hadoop伪分布式实 ...
分类:
其他好文 时间:
2020-10-18 09:54:43
阅读次数:
16
利用HDFS实现ElasticSearch7.2容灾方案 前言 ? Elasticsearch 副本提供了高可靠性,它们让你可以容忍零星的节点丢失而不会中断服务。但是,副本并不提供对灾难性故障的保护。对这种情况,就需要的是对集群真正的备份(在某些东西确实出问题的时候有一个完整的拷贝)。 ? 案例模拟 ...
分类:
其他好文 时间:
2020-10-14 20:34:15
阅读次数:
27
Kafka是Apache下的一个子项目,是一个高性能跨语言分布式发布/订阅消息队列系统,吞吐速率非常快,可以作为Hadoop的日志收集。Kafka是一个完全的分布式系统,这一点依赖于Zookeeper的分布式实现。 本文为新手准备,从Kafka的一些术语概念方面去认识Kafka。 Broker Ka ...
分类:
其他好文 时间:
2020-09-18 17:19:41
阅读次数:
37
Hadoop HA 集群搭建 Hadoop HA 集群搭建Hadoop 完全分布式环境搭建集群规划集群部署前提Hadoop伪分布式环境搭建配置IP映射安装 Java 与 Hadoop配置 Hadoop配置 MapReduce 与 YARN集群配置配置基本参数配置 SSH 免密登录格式化 HDFS启动 ...
分类:
其他好文 时间:
2020-09-18 03:33:30
阅读次数:
38