a b c d e f g h i j k l m no p q r s t u v w x y zhttp://ambari.apache.org/http://avro.apache.org/http://cassandra.apache.org/http://chukwa.apache.org... ...
分类：
其他好文 时间：
2016-12-12 14:48:24
阅读次数：
173
.build_release/lib/libcaffe-nv.so: undefined reference to cv::imread(cv::String const&, int)' .build_release/lib/libcaffe-nv.so: undefined reference t ...
分类：
其他好文 时间：
2016-12-06 20:20:02
阅读次数：
1978
一.从hadoop 下载2.7.3 安装包版本：hadoop-2.7.3.tar.gz下载地址：www.apache.org/dist/hadoop/common/hadoop-2.7.3/hadoop-2.7.3.tar.gz百度云下载地址：http://pan.baidu.com/s/1pLOy... ...
分类：
其他好文 时间：
2016-11-25 20:41:49
阅读次数：
222
中间路径省略了，刚开始没加冒号提示同样的文件，还以为是scp需要特殊指令才能复制同样的文件，查了发现不是，下面还有个提醒是hxsyl@...不是目录，这就奇怪了，吧注解当成目录了，然后发新啊少了冒号。 ...
分类：
其他好文 时间：
2016-11-22 03:05:43
阅读次数：
175
1、代码中尽量避免group by函数，如果需要数据聚合，group形式的为rdd.map(x=>(x.chatAt(0),x)).groupbyKey().mapValues((x=>x.toSet.size)).collection() 改为 rdd.map(x=>(x.chatAt(0）,x) ...
分类：
其他好文 时间：
2016-11-14 07:45:30
阅读次数：
462
项目中需要将本地文件拷贝到hdfs上，由于本人比较懒，于是使用擅长的Java程序通过Hadoop.FileSystem.CopyFromLocalFile方法来实现。 在本地(Window 7 环境)本地模式下运行却遇到了下述异常： 通过分析异常堆栈可知， 通过代码可知，这个方法是hadoop不支持 ...
分类：
其他好文 时间：
2016-11-13 17:00:17
阅读次数：
254
作者：Syn良子 出处：http://www.cnblogs.com/cssdongl 欢迎转载,转载请注明出处. 一.配置MapReduce Maven工程 新建一个Maven工程,将CDH集群的相关xml配置文件(主要是core-site.xml,hdfs-site.xml,mapred-sit ...
1.概况 截至目前，Apache Hadoop版本分为两代，我们将第一代Hadoop称为Hadoop 1.0，第二代Hadoop称为Hadoop 2.0。前者主要有如下几种实现方式：1）社区版本基于Secondary namenode机制来定时备份HDFS metadata元数据信息；2）Avata ...
分类：
其他好文 时间：
2016-11-02 14:28:09
阅读次数：
301
hive包：hive-2.1.0 安装： 1、解压缩 2、重命名hive-default.xml.template 为hive-default.xml 3、./schematool -initSchema -dbType derby初始化数据 进入hive命令行： 显示数据库 创建数据库 使用数据库 ...
分类：
其他好文 时间：
2016-10-31 13:37:38
阅读次数：
167
前言
我们在使用HDFS的时候，往往有的时候需要做一些临时的数据拷贝操作，如果是在同一个集群中的，我们直接用HDFS内部自带的cp这些命令即可；如果是跨集群的时候或者说待拷贝数据量规模非常大的时...
分类：
其他好文 时间：
2016-10-30 17:14:54
阅读次数：
382
