1安装JDK请参照jdk的安装步骤。2安装Hadoop请参照hadoop安装步骤。3下载Hive下载地址:http://mirrors.tuna.tsinghua.edu.cn/apache/hive/在该地址下载稳定版本的hive,我下载的版本是:apache-hive-2.1.1-bin.tar.gz将下载的hive安装包上传到服务器上的~/Downloads目录下。4安装Hive4.1解压h
分类:
其他好文 时间:
2019-05-04 12:12:03
阅读次数:
442
[toc] 1、YUM安装gitlab 11.10.4 下载gitlab ce的repo 安装gitlab 访问192.168.0.130会有英文界面,用户名为root,首次登陆需要修改密码,修改完成后,进入页面。点击右上角的Settings进行Preferences设置,在语言项选择中文,此时刷新 ...
分类:
其他好文 时间:
2019-05-04 12:09:01
阅读次数:
203
20175312 2018 2019 2 《Java程序设计》第10周学习总结 教材学习内容总结 已依照蓝墨云班课的要求完成了第十二章的学习,主要的学习渠道是PPT,和书的课后习题。 总结如下: 1、第十二章的主要内容: Java中的线程 Thread类与线程的创建 线程的常用方法 线程同步 协调同 ...
分类:
编程语言 时间:
2019-05-04 09:31:47
阅读次数:
152
二 Hive安装环境准备 2.1 Hive安装地址 1)Hive官网地址: http://hive.apache.org/ 2)文档查看地址: https://cwiki.apache.org/confluence/display/Hive/GettingStarted 3)下载地址: http:/ ...
分类:
其他好文 时间:
2019-05-03 18:52:54
阅读次数:
212
大数据是眼下非常时髦的技术名词,与此同时自然也催生出了一些与大数据处理相关的职业,通过对数据的挖掘分析来影响企业的商业决策。Hadoop工程师用人企业普遍要求掌握以下技术:1、熟悉Linux开发环境,熟悉Shell命令2、熟悉Java、python、scala语言(至少一种)3、具备较丰富的基于Hadoop、MapReduce、Yarn、Storm、Spark、Hive、Hbase、kafka、F
分类:
其他好文 时间:
2019-05-03 16:24:53
阅读次数:
132
1Hive简介 Hive对我来说就是一个基于HDFS的数据仓库,它提供了一个种类SQL语言(和SQL标准基本一样又有一些特殊的地方不一样),能让不精通Java语言而熟悉SQL语言的工程师,快速的对HDFS或其他存储文件系统如Amazon,S3,上的数据进行数据分析,是Hadoop生态系统中非常重要的 ...
分类:
其他好文 时间:
2019-05-03 11:37:53
阅读次数:
170
本文主要记录Hadoop 2.x版本中MapReduce参数调优,不涉及Yarn的调优。 Hadoop的默认配置文件(以cdh5.0.1为例): core-default.xml hdfs-default.xml mapred-default.xml 说明: 在hadoop2中有些参数名称过时了,例 ...
分类:
其他好文 时间:
2019-04-30 23:44:35
阅读次数:
195
原文:WPF防止界面卡死并显示加载中效果网上貌似没有完整的WPF正在加载的例子,所以自己写了一个,希望能帮到有需要的同学 前台: ... ...
shutil 模块提供了大量的文件的高级操作。特别针对文件拷贝和删除,主要功能为目录和文件操作以及压缩操作。 1、 shutil.copyfileobj(fsrc, fdst[, length]) 功能:把一个文件的内容拷贝到另外一个文件中。 2、shutil.copyfile(src, dst) ...
分类:
其他好文 时间:
2019-04-28 19:18:42
阅读次数:
164
pip模块 Usage: pip <command> [options] Commands: install Install packages. download Download packages. uninstall Uninstall packages. freeze Output insta ...
分类:
其他好文 时间:
2019-04-28 17:15:53
阅读次数:
132