一丶重写<NEW> 子类重写父类方法,方法里加new, eg: public new void CommonMethord1(string msg){} 子类继承父类中的普通方法,如果在子类中重写了一个和父类中完全相同的方法,子类中会报警告(问是否显式的隐藏父类的中的方法),如果在子类中的方法前加上 ...
分类:
其他好文 时间:
2018-07-04 15:09:20
阅读次数:
223
大数据方兴未艾,Hive在业界,是大数据的标配了。因此hive数据添加到ES的应用场景还是比较常见的。学习ES官方的es-hadoop,有从hive导数据到ES.实验可行。hive的版本:hive-1.1.0-cdh5.9.0具体的步骤如下:step1将elasticsearch-hadoop-hive-version.jar添加到hivewgethttps://artifacts.elastic
分类:
其他好文 时间:
2018-07-01 23:04:27
阅读次数:
460
cp命令 cp命令用来将一个或多个源文件或者目录复制到指定的目的文件或目录。 用法: cp [OPTION]... [-T] SOURCE DEST 常用参数:-i prompt before overwrite(覆盖前提示) -i是安全选项,如遇到一个已知的文件,就会询问是否覆盖。 我们常使用的c ...
分类:
其他好文 时间:
2018-06-18 18:17:15
阅读次数:
251
一、 基本的离线数据处理架构: 数据采集 Flume:Web日志写入到HDFS 数据清洗 脏数据 Spark、Hive、MR等计算框架来完成。 清洗完之后再放回HDFS 数据处理 按照需要,进行业务的统计和分析。 也通过计算框架完成 处理结果入库 存放到RDBMS、NoSQL中 数据可视化 通过图形 ...
分类:
数据库 时间:
2018-06-15 00:02:22
阅读次数:
386
Java的基类Object提供了一些方法,其中equals()方法用于判断两个对象是否相等,hashCode()方法用于计算对象的哈希码。equals()和hashCode()都不是final方法,都可以被重写(overwrite)。 本文介绍了2种方法在使用和重写时,一些需要注意的问题。 一、eq ...
分类:
其他好文 时间:
2018-06-13 23:31:11
阅读次数:
302
有时候需要将hive库中的部分数据导入至本地,这样子做可视化和小规模的数据挖掘实验都是比较方便的。数据导入至本地的HQL语法如下: INSERT OVERWRITE [LOCAL] DIRECTORY directory1 select_statement1;但是hive对字段分隔时默认使用的分隔符 ...
分类:
其他好文 时间:
2018-06-08 19:20:28
阅读次数:
198
通过hadoop上的hive完成WordCount 启动hadoop Hdfs上创建文件夹 上传文件至hdfs 启动Hive 创建原始文档表 导入文件内容到表docs并查看 1 2 load data inpath '/user/hadoop/tese1/try.txt' overwrite int ...
分类:
其他好文 时间:
2018-05-16 22:29:31
阅读次数:
157
@解决excel中sheet为中文提示acii乱码问题workbook = xlwt.Workbook(encoding = 'utf-8') #encoding 引入编码sheet = workbook.add_sheet(key,cell_overwrite_ok=True) @python学习 ...
分类:
编程语言 时间:
2018-05-15 19:45:34
阅读次数:
207
1,rmdir,一个很鸡肋的命令,只能删除空目录 2,mv: 移动文件或者重命名 把1.txt重命名为11.txt 把11.txt移动到b目录 -f:如果目标文件存在,不会询问直接覆盖 -i: 如果目标文件存在,询问是否覆盖 -n: 不覆盖已经存在的文件 -u: 当文件不存在,或者源文件比目标文件新 ...
分类:
系统相关 时间:
2018-05-06 20:05:22
阅读次数:
207