1.pom文件 <dependency> <groupId>org.scala-lang</groupId> <artifactId>scala-library</artifactId> <version>${scala.version}</version> </dependency> <depen ...
分类:
数据库 时间:
2018-12-08 15:49:31
阅读次数:
157
注:图片如果损坏,点击文章链接:https://www.toutiao.com/i6627669615377908231/ Hadoop环境已安装完成,安装hive 注意1.x和2.x版本区别较大,此处安装的是1.x的版本 准备安装包 使用hadoop用户 解压文件到/opt/bigdata 修改文 ...
分类:
其他好文 时间:
2018-12-07 11:49:25
阅读次数:
200
将csv文件导入hive后出现了所有的字段只显示在新建的表的第一个字段中,后面的字段全是null. 出现这种的原因是hive以行分隔数据,需要修改为按逗号' , ‘ 进行分隔读取, 具体操作如下, 首先在hive中创建自己的table, 并且设置以逗号分隔。 create table IP(ip v ...
分类:
数据库 时间:
2018-12-06 20:13:21
阅读次数:
204
参考文档 1. 百度百科:https://baike.baidu.com/item/%E4%BD%8D%E8%BF%90%E7%AE%97/6888804?fr=aladdin 2. &(与运算)、|(或运算)、^(异或运算)的本质理解 https://blog.csdn.net/xiaopihai ...
分类:
其他好文 时间:
2018-12-05 22:27:12
阅读次数:
266
Cloudera版本(Cloudera’s Distribution Including Apache Hadoop,简称“CDH”),基于Web的用户界面,支持大多数Hadoop组件,包括HDFS、MapReduce、Hive、Spark、 Hbase、Zookeeper、Sqoop,简化了大数据 ...
分类:
其他好文 时间:
2018-12-05 22:26:39
阅读次数:
290
-- 重点,目标表无重复数据 从结果可以看出,在无重复数据的情况下,parquet的压缩无用武之地,占用空间比textfile还大,ORC是压缩最强的文件模式。 ...
分类:
其他好文 时间:
2018-12-05 20:32:24
阅读次数:
201
前段时间在《修复iPhone上submit按钮bug》中介绍了使用“-webkit-appearance: none; ”来改变按钮在iPhone下的默认风格,其实我们可以反过来思路,使用“appearance”属性,来改变任何元素的浏览器默认风格,简单的说,你可以使用“appearance”属性将 ...
分类:
移动开发 时间:
2018-12-05 16:27:27
阅读次数:
269
全面理解JavaScript中的 this 上下文 VS 作用域 作用域(scope) 是在运行时代码中的某些特定部分中变量,函数和对象的可访问性。换句话 说,作用域决定了代码区块中变量和其他资源的可见性。而上下文 (context)是用来指定代码某些特定部分中 this 的值。 作用域是基于函数( ...
分类:
编程语言 时间:
2018-12-04 20:35:49
阅读次数:
220
现有如此三份数据:1、users.dat数据格式为:2::M::56::16::70072,共有6040条数据对应字段为:UserIDBigInt,GenderString,AgeInt,OccupationString,ZipcodeString对应字段中文解释:用户id,性别,年龄,职业,邮政编码2、movies.dat数据格式为:2::Jumanji(1995)::Adventure|Chi
分类:
其他好文 时间:
2018-12-03 20:07:49
阅读次数:
244