码迷,mamicode.com
首页 >  
搜索关键字:hadoop 2.6.0源码编译    ( 13955个结果
学习进度-06
1、使用 Hadoop 提供的 Shell 命令完成如下操作 (1) 启动 Hadoop,在 HDFS 中创建用户目录“/user/hadoop” 其中遇到的问题: 解决方法: (2) 在 Linux 系统的本地文件系统的“/home/hadoop”目录下新建一个文本文件test.txt,并在该文件 ...
分类:其他好文   时间:2020-02-06 23:29:09    阅读次数:154
HBase学习二
本次记录是用于:SparkStreaming对接Kafka、HBase记录 一、简介 ①HBase本身是一个菲关系型数据库,存储数据结构时以key-value结构来进行存储,HBase中的数据是稀疏的。 ②基于Hadoop运行,但是HBase的效率在秒级别 ③基于列存储:传统行存储方式在查询特定列时 ...
分类:其他好文   时间:2020-02-06 16:53:41    阅读次数:101
sqoop使用入门
sqoop是apache旗下,用于关系型数据库和hadoop之间传输数据的工具,sqoop可以用在离线分析中,将保存在mysql的业务数据传输到hive数仓,数仓分析完得到结果,再通过sqoop传输到mysql,最后通过web+echart来进行图表展示,更加直观的展示数据指标。 sqoop基础 基 ...
分类:其他好文   时间:2020-02-06 16:40:10    阅读次数:80
HADOOP HA部署
本次部署haddoop集群三台hostname:HBASE01 HBASE02 HBASE03 192.168.240.129 HBASE01 192.168.240.130 HBASE02 192.168.240.131 HBASE03 将HBASE01 HBASE02作为namenode节点,H ...
分类:其他好文   时间:2020-02-06 14:24:12    阅读次数:69
2020寒假生活学习日记(六)
在Windows系统和Linux系统之间互传文件 本教程大量实验都是在Linux虚拟机上完成,因此,需要掌握如何把Windows系统中 的文件上传到Linux系统,以及如何把Linux系统中的文件下载到Windows系统中。 首先,到本教程官网的“下载专区”中的“软件”目录中,下载FTP软件File ...
分类:其他好文   时间:2020-02-06 12:32:32    阅读次数:146
大数据面试题(一)----HADOOP 面试题
1. 下列哪项通常是集群的最主要瓶颈(C) A. CPU B. 网络 C. 磁盘IO D. 内存 2. 下列哪项可以作为集群的管理工具?(C) A.Puppet B.Pdsh C.ClouderaManager D.Zookeeper 3. 下列哪个是Hadoop 运行的模式?(ABC) A. 单机 ...
分类:其他好文   时间:2020-02-05 18:41:15    阅读次数:95
(01)Zookeeper简介
Zookeeper是Google的Chubby一个开源的实现,是Hadoop的分布式协调服务。它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名服务等。 架构图如下: Zookeeper能做些什么? Hadoop2.0使用Zookeeper的事件处理确保整个集群只有一个活跃 ...
分类:其他好文   时间:2020-02-05 13:54:23    阅读次数:59
寒假记录5
今天完成了实验任务三,主要学习了其中的Spark读取文件系统的数据。 在 spark-shell 中读取HDFS 系统文件“/user/hadoop/test.txt”(如果该文件不存在,请先创建),然后,统计出文件的行数; scala>val textFile=sc.textFile("hdfs: ...
分类:其他好文   时间:2020-02-05 13:41:27    阅读次数:70
Scala:读写文件
写入文本文件: Scala需要使用java.io.PrintWriter实现把数据写入到文本文件。 采用相对路径时,当使用用户名hadoop登录Linux系统,打开Scala解释器进入命令提示符状态后,输入以下代码: scala> import java.io.PrintWriter import ...
分类:其他好文   时间:2020-02-04 15:54:31    阅读次数:87
Vue Zero · 啟
其实,一开始我应聘的是Spark,Hadoop这样的,然后后面呢,发现只有Java的业务给我写了,再后面我发现,公司招不到前端,所以前端要由后端来写,刺激!!!数据驱动首先要明白一个概念,那就是DOM其实是数据的一种映射,在之前jQuery的时代,当数据发生改变时,我们需要手动改变DOM,而Vue的... ...
分类:其他好文   时间:2020-02-04 11:01:46    阅读次数:90
13955条   上一页 1 ... 80 81 82 83 84 ... 1396 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!